пример взятия информации с чужого сайта

[zaartix]

пример взятия информации с чужого сайта

Здравствуйте.
Я вот сделал сайтик, грабящий многие другие сайты, но почему-то не всех получается обработать, в чем может быть дело, кроме блокировки айпи моего сервера?

Если кому интересно, вот пример:
http://www.vzt.ru/portal/script/catalog.phtml?ca_id=8&cp_level=1

Товарищи модераторы, это не реклама моего ресурса, там даже половина ссылок неработает.

 

[[VS]]

Я не понял, а где вопрос?

 

[zaartix]

вопрос же был назван, не со всех сайтов получается отграбить информацию. Например ответ гугла получить ну никак не удается.
с чем это еще может быть связано, кроме как с блокировкой конкретного айпи?

 

[slach]

da po vsyakomu...
nu naprimer site vistavlyaet cookie... i proveryaet referers...

 

[[VS]]

zaartix: учи HTTP протокол. Я серьезно. Хотя-бы про хэдеры. Тогда ты не будешь задавать глупых вопросов, а сам посмотришь - каких хэдеры отсылает браузер и сделаешь то-же самое из скрипта.

 

[lunizz]

Автор оригинала: zaartix
Например ответ гугла получить ну никак не удается.
с чем это еще может быть связано, кроме как с блокировкой конкретного айпи?

Ответ с гугла никому получить не удается. Гугл не пальцем делан и не палкой. Реализвали свои методы какие-то наверно http.

 

[[VS]]

Автор оригинала: lunizz
Ответ с гугла никому получить не удается. Гугл не пальцем делан и не палкой. Реализвали свои методы какие-то наверно http.

Не неси бред.
Браузеру удается получить ответ с гугла?

 

[lunizz]

Автор оригинала: [VS]
Не неси бред.
Браузеру удается получить ответ с гугла?

Сорри, промазал, получаю ответ и file и wget...

Но вообще... Была какя-то лажа с получением страниц google... я не помню какая

 

[antonio]

Автор оригинала: lunizz
Сорри, промазал, получаю ответ и file и wget...

Но вообще... Была какя-то лажа с получением страниц google... я не помню какая

ню ню, посмотри сюда, переплющиваю гугл
http://anton.concord.ru/search/search.php

 

[lunizz]

Прикольно!