Как узнать что посетитель это Yandex?

maxim

Новичок
Как узнать что посетитель это Yandex?

каким образом можно отловить что посетитель это поисковый робот
по IP, по названию браузера и т.д.?

Дело в том что я исользую авторизацию для доступа к сайту. А боты авторизовываться не умеют, но я хотел бы чтобы они имели полный доступ к сайту и индексировали все его страницы.
 

Сергей123

Новичок
>> Как узнать что посетитель это Yandex?
_http://webmaster.yandex.ru/faq.xml?id=502499#user-agent

>> и индексировали все его страницы
а потом по ссылке из результатов поиска приходит чел - а там болтик на 8
 

maxim

Новичок
спасибо
Но это я видел. А кроме этого как то отловить еще можно (Yandex, Google Rambler)?
 

arthurpro

Новичок
по юзерагенту, по подсети
однако подсеть еще найти надо, да и измениться она может в любой момент
других вариантов увы нет
 

Kelkos

Сам себе программер
maxim
искренне не советую тебе делать ТАКОГО. Подобными действиями ты попадёшь под "автобан" сайта. Яндек периодически проверяет соответствие проиндексируемого контента выдаваемому. А в твоём случае замаскированный под пользователя бот яндекса получит НЕ ТУ страницу, что индексирубщий бот. Вообщем, доиграешься ты..
 

Фанат

oncle terrible
Команда форума
Дело в том что я исользую авторизацию для доступа к сайту. А боты авторизовываться не умеют, но я хотел бы чтобы они имели полный доступ к сайту и индексировали все его страницы.
идиотизм какой-то.

просто убери авторизацию
 
Сверху