Техническое задание на доработку парсера сайтов_1

Денис5 лет в сервисе

Данные заказчика будут вам доступны после подачи заявки

22.07.2020

Техническое задание на доработку парсера сайта auto.ru (или написать новый), и разработку парсера сайта drom.ru.

Водные данные:

1.На данный момент есть парсер, собирает данные с auto.ru и avito.auto, необходимо доработать парсер (или написать новый) сайтов auto.ru и написать парсер для сайтов drom.ru;

2.Поддерживать работоспособность парсера на ежемесячной основе. Сбор первичных данных

Необходимо собирать данные о новых объявлениях.

Состав данных следующий: Начальные страницы со списком объявлений:https://m.avito.ru/rossiya/avtomobili/s_probegom/ne_bityy?params[188-from-int]=2005&sort=date&withImagesOnly=true https://auto.drom.ru/used/all/?minyear=2005&ph=1&damaged=2

src: наименование сайта, с которого собраны объявления

src_id: id объявления на сайте-доноре

link: ссылка на объявление

vin: вин на сайте-доноре (может быть маскированным)

year: год выпуска автомобиляcolor: цвет автомобиля на сайте-доноре

brand: марка автомобиля

model: модель автомобиляgeneration: поколение автомобиляversion: комплектация автомобиля

engine_size: объем двигателя автомобиля

engine_type: тип двигателя автомобиля (бензин, дизель, газ, гибрид и т.п.)