Список всех поисковых и прочих Роботов.

[VEgor]

Список всех поисковых и прочих Роботов.

Есть ли у кого список всех актуальных поисковых и прочих Роботов (ip, либо HTTP_USER_AGENT)

 

[Popoff]

То, что актуальным является сейчас не будет являтся актуальным через час. И уж тем более завтра. А списка *всех* поисковых систем, мне кажется, нет ни у кого. А вот приблизительный список некоторых систем, построенный экспериментальным путем у меня есть.

[список ip-адресов удален]

Только не знаю, можно ли на форуме выкладывать такую информацию. Вообще-то тебя не должно интересовать, обращается ли к тебе поисковый робот или обычный пользователь; в соглашениях любой поисковой системы наверняка можно найти пункт, в котором написано, что для поискового робота нужно генерировать такое же содержимое, как и для обычных посетителей. Иначе твой сайт может рассматриваться как генерирующий поисковый спам.

 

[VEgor]

ок, спасибо. буду благодарен всем, кто поделится.

и еще если есть у HTTP_USER_AGENT'ы всех браузеров (это реальнее), поделись плз.

 

[Фанат]

это НЕ реальнее =)

-~{}~ 06.07.05 19:58:

чувак. саый простой способ собрать такую статистику - это недельку пописать логи у себя на сайте

 

[inse3t]

Вот довольно большой список:
http://www.psychedelix.com/agents.html

-~{}~ 06.07.05 20:51:

Когда то я писал в форум...

http://phpclub.ru/talk/showthread.php?s=&threadid=69171

 

[master_x]

если тебе нужны все агенты, т.е. программы-агенты и их свойства, то есть очень большие файлы под названием browscap.ini они содержат информацию обо всех самых популярных агентах. Этот файл надо закачать (поищи по php.net, там есть ссылка) и прописать в php.ini путь к этому файлу (browscap=path_to_file).