Парсер циан
Необходимо сделать простой парсер.
На сайте циан.ру по ссылке: https://www.cian.ru/cat.php?currency=2&deal_type=rent&engine_version=2&minprice=50000&offer_type=flat®ion=1&room1=1&room2=1&room3=1&totime=-2&type=4# необходимо спарсить данные квартир. Делается это просто. Нажимается кнопка- сохранить в exel(функция дается самим сайтом) http://prntscr.com/m06xk2 . Однако есть ограничение. Скачивается всего по 200 объектов максимум. Поэтому надо разбить например по цене: 50000-51000 руб. 51-53000 53000-55000 и т.д. И в несколько подходов скачать файлы.
2) Скачанные файлы необходимо сравнить с нашей бд.(тоже ексель файлы) Параметры сравнения: адрес+ количество комнат.
Те адреса которые совпадают, надо выдать списком.
3) Нужен стоп лист. То есть объекты собранные с циан вчера, попадают в стоп лист. На сл. день парсер скачивает объекты с циан, сравнивает адреса с вчерашними, и выдает только те, которые не были добавлены вчера. Все.
Должна быть возможность добавить прокси.