Могут ли забанить робота?

[golos81]

Могут ли забанить робота?

Предложили сделать робота, который будет по расписанию ходить на сайт и смотреть, обновились ли новости.

Проблем в реализации подобного скрипта не вижу. Не понятно только одно - могут ли его забанить владельцы сайта, где робот будет проверять новости? Точнее даже не то, что могут или не могут (понятно, что могут), а как они его могут вычислить? Посещаемость сайта несколько тысяч уников в сутки. Роботу необходимо делать порядка 30 заходов в сутки. Т.к. запускаться планирую по крону, то обращения будут, примерно раз в час.

1) Какого вероятность, что его отловят?

2) Существуют ли какие-нибудь средства, отлавливающие посещаемость одних и тех же запросов в одно и тоже время?

 

[Фанат]

1) большая
2) Существуют
3) Правила форума ты знаешь. Можашь убирать его из закладок.

 

[golos81]

Автор оригинала: *****
1) большая
2) Существуют
3) Правила форума ты знаешь. Можашь убирать его из закладок.

1) Почему большая? Если отдавать нормальный user-agent, вызывать страницы с рандомными паузами, то на основе чего его могут отловить?
2) Можно название?
3) Если ты о краже контента, то речь здесь не об этом. Говорю же, надо просто проверять новости.

 

[gray07]

а можна про пункт 2, я хочу поймать робота, который лазит на мой сайт
и забанить его >:-|

 

[Фанат]

gray07
читай книжки, анализируй логи, и через пару лет у тебя все обязательно получится.

golos81
свободен