Требуется разработка парсеров для извлечения данных как через API, так и с сайтов. Данные необходимо хранить в MongoDB и других форматах. Подробности о типах данных будут предоставлены на переговорах.
Сделать парсер Ebay на PHP
Нужно реализовать парсер на PHP
Парсер должен менять
Proxy - можно попробовать взять отсюда https://spys.one/free-proxy-list/US/ (или я дам несколько с паролем)
UserAgent - можете использовать https://github.com/phpfail/UserAgentGenerator
Он должен состоять из 2 этапов
1 этап парсер каталога
На входе ссылка каталога. Например https://www.ebay.com/b/Mountain-Bikes/177831/bn_1867986
Нужно ходить по каталогу и записывать в базу лоты, пока не встретим уже существующий лот
-IdLots (автоинкремент)
- Title (s-item__title) прадварительно очистить от html
- Url - ссылку на лот
- Price - (s-item__price)
- operationId (парсим operationId)
- DateAdd (дата добьавление лота)
2 этап парсер лота
Дальше нужно ходить по ссылкам лотов (Url) и парсить
- Заголовок лота (h1)
- Цену
- Проставлять это (Current bid- ставка или Price - окончательная цена)
- Фотографии в максимальном разрешении (сохранять в массив)
- Месторасположение (Item location)
- Состояние (Condition)
Распарсить таблицу Item specifics, каждое значение в отдельное поле (Например https://www.ebay.com/itm/2008-Specialized-Rockhopper-Comp-Disc-29er-Mountain-Bike-17-Retail-1000/393160448598?hash=item5b8a305a56:g:UXwAAOSw8U5gOY-o название поле Vintage Значение No, название поле MPN Значение Does Not Apply ) Поля в таблицу добавлять динамически.
Заявки фрилансеров
Похожие заказы
- $10Веб-программирование6 заявокЗакрыт4 года назад
Требуется full-stack разработчик для реализации корпоративного веб-сайта с использованием Symfony и Vuejs. Задача включает в себя создание функционала согласно техническому заданию. Ознакомьтесь с проектом для получения более подробной информации.
Веб-программирование2 заявкиЗакрыт4 года назадТребуется доработка сайта на WordPress с несколькими задачами. Необходимо реализовать ресайз изображений, добавить возможность указания профиля Instagram и ссылки на сайт пользователей, а также внедрить функцию геолокации для поиска пользователей. Ожидается использование различных плагинов, таких как Smush и Geo My WP. Укажите примерный срок выполнения.
Веб-программирование4 заявкиЗакрыт4 года назад- $1500
Ищется разработчик для создания агрегатора парсер, который будет отслеживать статусы инвестиционных и финансовых проектов. Система должна включать автоматическое обновление данных, сортировки, фильтры, рейтинги и мультиязычность. Важно предоставить информацию о методах реализации и опыте в подобных проектах.
Веб-программирование2 заявкиЗакрыт4 года назад Требуется доработка мода SEO Tags Generator для OpenCart 2.3. Необходимо добавить поле с переменной для производителей, аналогично категориям, чтобы использовать его в формуле для генерации SEO-тегов. Укажите стоимость выполнения задачи.
Веб-программирование2 заявкиЗакрыт4 года назадТребуется увеличить скорость загрузки сайта, написанного на Laravel 8. Цель – достичь зеленой зоны в тестах производительности. Необходимы профессиональные навыки в веб-программировании и оптимизации.
Веб-программирование5 заявокЗакрыт4 года назадТребуются доработки для сайта на WordPress. Ищется специалист, который сможет выполнить задачи как по верстке, так и по коду. Работы будут оплачены по факту. Уточнение ТЗ будет предоставлено. Укажите ставку за час работы.
Веб-программирование6 заявокЗакрыт4 года назадТребуется исправить ошибки на сайте greenled.ru для достижения 90-100% в PageSpeed Insights на ПК и мобильных устройствах. Важно сохранить весь функционал и работоспособность сайта. Укажите стоимость в рублях РФ и сроки выполнения.
Веб-программирование2 заявкиЗакрыт4 года назадТребуется переработка сайта на Wordpress с внесением изменений в оформление блоков, добавлением новых блоков и контактных форм. Ищем специалиста, который хорошо знает Wordpress, умеет писать фильтры и сортировки товаров. Заявки от новичков и студий не рассматриваются.
Веб-программирование4 заявкиЗакрыт4 года назадТребуется интеграция скрипта покупки в один клик для Opencart. Необходимо внести изменения в одну tpl и один контроллер. Коммерция от аналитики уже настроена, что упростит задачу. Используйте указанный пример для реализации.
Веб-программирование2 заявкиЗакрыт4 года назад