Парсер Taobao

Гость6 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
21.04.2020

Необходим парсер страницы товара магазина на taobao.com. Без GUI.

Можно запускать например через bat.

Внимание! Парсить нужно несколько сотен страниц каждый день.

Автоматические скачивания сайт не любит, после 3-4 запросов под одним логином пришлёт каптчу.

Необходимо использовать прокси.

На входе

* id товара, формирующий ссылку item.taobao.com/item.htm?id=559987886154

* id продавца-магазина 44671326

* id товара и id продавца даются списоком в файле, здесь значения для примера

* IP адрес прокси(!!!), логин пароль, если не указан, то подключается без прокси

Задача

Во время загрузки браузером страницы товара по ссылке

detailskip.taobao.com/service/getData/1/p1/item/detail/sib.htm?itemId=559987886154&sellerId=44671326&modules=dynStock,qrcode,viewer,price,duty,xmpPromotion,delivery,upp,activity,fqg,zjys,amountRestriction,couponActivity,soldQuantity,page,originalPrice,tradeContract

загружаются цены и характеристики всех торговых предложений.

В прикрепленных файлах есть результат ответа этого запроса.

Проблема

Запрос выполняется только во время загрузки страницы, в других случаях ответ не приходит.

Результат

Получить и сохранить ответ как есть в текстовый файл.

Никаких авторизаций нет и не будет предоставлено!

Ваш парсер должен сделать некую эмуляцию браузера, чтобы запрос указанный ниже в ТЗ нормально отдавал данные.

Предлагайте варианты решения и бюджет.