Парсер каталогов Рамблер ТОП100 и LiveInternet

Николай14 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
22.07.2015

Необходимо разработать парсер url сайтов из каталогов LiveInternet (liveinternet.ru/rating) и Рамблер ТОП100 (top100.rambler.ru/navi).

Программа должна быть многопоточной с поддержкой прокси и user agent.

В настройках я должен буду ввести номер страницы до которой программа будет парсить сайты включительно. Результат парсинга (адреса сайтов построчно) должен сохраняться в файл .txt

Парсер должен уметь парсить не только с liveinternet.ru/rating и top100.rambler.ru/navi, но и из liveinternet.ru/rating/literature, liveinternet.ru/rating/auto, top100.rambler.ru/navi/?theme=217&rgn=1, top100.rambler.ru/navi/?rgn=1 и т.д. Для этого в программе должно быть поле для ввода url стартовой страницы парсинга.

Писать можно на чем угодно, только не на PHP.

В заявках указывайте стоимость, срок выполнения, а также на чем будете писать парсер.