Парсер индексации страниц в яндексе

Максим17 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
08.09.2008

Нужно проверить проиндексирована ли яндеком страница, например,

http://inmoment.ru/beauty.html

http://yandex.ru/yandsearch?date=&text=&spcctx=notfar&zone=all&wordforms=all&lang=all&within=0&from_day=&from_month=&from_year=&to_day=8&to_month=9&to_year=2008&mime=all&site=http%3A%2F%2Finmoment.ru%2Fbeauty.html&rstr=&ds=&numdoc=10

Как можно больше страниц за как можно меньшее время.

Так как у яндекса есть защита от роботов, проект состоит из 2 частей.

1. Парсер прокси - должен запускатся по крону каждый день, обновлять список прокси с проверкой на работоспособность.

2. Парсер яндекса, использующий имеющиеся в списке прокси.