[работа граббера] Поделитесь идеями как собрать массив уникальных страниц(в пределах текущего) сайта, чтобы не было зацикливаний, с последующей обработкой каждой страницы на наличие необходимой информации.