Cкрипт сбора информации с сайта-каталога

Нужно разработать скрипт сбора информации с сайта-каталога, который скорее всего защищён от последовательного скачивания данных со всех страниц роботами (вероятнее всего кол-во запросов и/или метод запросов с одного IP). Нужно "прочитать" порядка 70-100 тысяч страниц. В результате нужна таблица с собранными данными и желательно сам скрипт. Возможно для обхода защиты потребуется работать через прокси сервера.