Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Нужно реализовать парсер на PHP

Парсер должен менять

Proxy - можно попробовать взять отсюда https://spys.one/free-proxy-list/US/ (или я дам несколько с паролем)

UserAgent - можете использовать https://github.com/phpfail/UserAgentGenerator

Он должен состоять из 2 этапов

1 этап парсер каталога

На входе ссылка каталога. Например https://www.ebay.com/b/Mountain-Bikes/177831/bn_1867986

Нужно ходить по каталогу и записывать в базу лоты, пока не встретим уже существующий лот

-IdLots (автоинкремент)

- Title (s-item__title) прадварительно очистить от html

- Url - ссылку на лот

- Price - (s-item__price)

- operationId (парсим operationId)

- DateAdd (дата добьавление лота)

2 этап парсер лота

Дальше нужно ходить по ссылкам лотов (Url) и парсить

- Заголовок лота (h1)

- Цену

- Проставлять это (Current bid- ставка или Price - окончательная цена)

- Фотографии в максимальном разрешении (сохранять в массив)

- Месторасположение (Item location)

- Состояние (Condition)

Распарсить таблицу Item specifics, каждое значение в отдельное поле (Например https://www.ebay.com/itm/2008-Specialized-Rockhopper-Comp-Disc-29er-Mountain-Bike-17-Retail-1000/393160448598?hash=item5b8a305a56:g:UXwAAOSw8U5gOY-o название поле Vintage Значение No, название поле MPN Значение Does Not Apply ) Поля в таблицу добавлять динамически.

3 года назад
AlexAntonenko
63 годаУкраина
15 лет в сервисе
Был
6 месяцев назад
  • Похожие заказы
  • $10

    Мы ищем парсеров для работы как по API, так и парсинга сайтов напрямую. Данные следует хранить в MongoDB (но другие форматы будут тоже нужны). Какие данные нужно вытаскивать сообщим позже, во время переговоров.

    Закрыт
    3 года назад
  • Сайт для ознакомления - https://rb.gy/usfnbo Список задач: 1. Когда пользователь загружает изображения через галерею или форму заявки, их надо ресайзить. Также нужна возможность редактировать пользовательские изображения с бэкэнда. Предлагаю использовать custom image size и плагин Smush. 2. На ...

    Закрыт
    3 года назад
  • $1500

    [u]Необходимо разработать[/u] агрегатор парсер информации о статусах, состояниях и работоспособности инвестиционных, финансовых проектов и ресурсов для заработка. С возможностью изменения информации, добавлением и удалением данных. [u]В наличие у сервиса будет:[/u] система мониторинга с автоматическим обновлением ...

    Закрыт
    3 года назад
  • Опенкарт 2.3 Нужно доработать мод SEO Tags Generator — автогенерация SEO-тегов для OpenCart 2.x & 3.x Сколько будет стоить добавить одно поле с переменной для Производителей? по аналогии как в категориях, чтоб можно было его ...

    Закрыт
    3 года назад
  • Необходимо увеличить скорость загрузки сайта. Сайт написан на lavarel 8. Необходимо довести сайт до зеленой зоны. Пожалуйста оставляйте свой телеграм для связи. Ссылку отправлю там. Для оценки цены и сроков. С уважением.

    Закрыт
    3 года назад
  • Требуется человек, который разбираться в WP Доработки нужны как по верстке так и с кодом надо будет поработать, скорее всего покажу ТЗ и все расскажу Пишите сразу сколько за час работы работа по ПОСТОПЛАТЕ Ищу именно исполнителя

    Закрыт
    3 года назад
  • Добиться 90-100% для ПК и мобильных устройств в PageSpeed Insights, исправив все ошибки. Сохранить функционал и работоспособность. Пишите стоимость в рублях РФ и сроки. Сайт greenled.ru

    Закрыт
    3 года назад
  • Здравствуйте. Исходный сайт на Wordpress, останется на этой же CMS. Задача на основе готового сайта внести ряд изменений в оформление блоков, добавить новые блоки, контактные формы и т.п. Более подробное описание предоставлю для оценки. От вас ожидаем: 1. ...

    Закрыт
    3 года назад
  • Добрый день!  Необходимо добавить скрипт покупки https://yandex.ru/support/metrica/data/e-commerce.html#e-commerce__ex-purchase в модуль покупки в один клик. Внести изменения по сути в одну tpl и 1 контролер. Коммерция от аналитики уже настроена в этом окне, поэтому можно будет делать на примере.

    Закрыт
    3 года назад