Как пробежаться скриптом по ссылкам?

defence

Деклассированный элемент
Как пробежаться скриптом по ссылкам?

Собственно, сабж... Руководство хочет иметь локальную html-версию сайта. Вытащить хтмл-код одной страницы - это не сложно (курл). А вот как автоматизировать процесс?

Спасибо.
 

defence

Деклассированный элемент
nalevo
Честно говоря, никогда ими не пользовался... Не было необходимости. А они сохраняют html-код?
 

Tor

Новичок
тебе именно их и посоветовали - раз
попробовать религия не велит? - два
 

nikit87

Новичок
defence
Если хочеться с помощью curl, то создаем базу куда адреса записывать будешь. Потом тащишь первую страницу, регулярками вытягиваешь адреса, заносишь в базу. Потом вытаскиваешь из базы адрес,отмечая его как использованный, качаешь курлом страничку и тоже самое.
Только если тебе нуна слить большой сайт или тебе просто нуна его скачать без обработки, тогда оффлайн браузер тебе в помощь.
 

defence

Деклассированный элемент
nikit87
Спасибо! я уже телепортом проблемку решил...
Tor'у респект!
 
Сверху