Граббер сайта с защитой
Виталий19 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
20.11.2010
Необходимо сграбить порядка 20 000 страниц сайта.
есть работающий скрипт php который идет по списку URL и сливает образы страниц в папки
проблема в том, что на сайте стоит защита от грабинга. через X обращений с одного ip система начинает выдавать в ответ страницы с неправильной информацией.
Необходимо использовать список proxy. + разобраться как точно работает защита.
результат работ - большой архив файлов
прошу откликаться только тех, кто действительно разбирается в вопросе.
для удобства, могу купить хостинг куда поставить робота.