Необходим парсер на nodejs, который будет собирать цены с заданного списка сайтов.
Количество сайтов, порядка 40 штук, все имеют разную структуру. Где-то каждый
товар находится на отдельной странице, где-то у каждой категории своя
страница и все товары представлены на ней, где-то все товары указаны в
виде таблицы на одном сайте.
Номенклатура ограничена 3-4 категориями, в каждом по 5-10 товаров.
Алгоритм работы парсера:
- парсер через заданный список прокси поочерёдно заходит на каждый из 40 сайтов
- для каждого сайта используется свой обработчик, который используя селекторы вытаскивает нужные данные о ценах
- цены систематизируются в виде ассоциативного массива и после завершения
их сбора с конкретного сайта заносятся в базу данных mysql с указанием
датывремени запроса
Требование к структуре:
- использование асинхронных запросов к сайтам
- если данные не удалось загрузить, эта информация должна записаться в лог файл
- обработчики должны выполняться в виде отдельных классов, чтобы при
необходимости можно было переделывать каждый обработчик и добавлять
новые
Есть CRM на Битрикс24. Необходимо используя API Битрикс24 сделать автоматическую выгрузку контактов из CRM в Google Contacts (синхронизация раз в 5 минут). Из CRM переносим поля ФИО, компания, сайт, телефон (может быть несколько), электронную почту. ...
Требуется добавить: [list][*]Поле ввода текст[*]выбор шрифта[*]цвет шрифта[*]цвет фона [*]размер шрифта[*]параметры поля[*]количество частиц[*]сохранение надпись как gif анимация [/list]
Добрый день! Нужны спецы работающие с данными движками. Частые заказы, адекватная оплата труда. Только частные лица. Сейчас нужно сделать верстку и программную часть для сайта на движке Joomla.Просьба писать на почту или откликнуться на этот проект!
Здравствуйте! 1. Сколько будет стоить скрипт идентификации пользователей Вконтакте? Кликджекинг. Через виджет – лайк от ВК. 2. Сколько будет стоить чуть-чуть видоизменить такой скрипт? Чтобы не было его оригинального названия. Плюс, может, поменять цвет ...
Необходимо создать заявку на кредит с передачей данных по API. Заявка должна включать в себя определенные поля и ответы по шаблону, все данные пришлем заинтересовавшемуся мастеру. Автоматом должно определяться ГЕО и IP. Сумма кредита в ...
Здраствуйте фрилансеры. Нам на лендинг требуется разработать скрипт который позволит изменять значение цены от ввода в input поле промокод любых значений. Лендинг есть, есть вся верстка, необходимо только прикрутить функционал по изменению цены при вводе ...
Необходимо поправить PHP парсер цен с авиа сайта на мой сайт. В даннный момент цену не тянет Сайт донор https://aviacassa.ru Недавно парсер ломался, починили добавив проксирование парсинга. Изначально, бан по айпи от сайта донора, была причина ...
Необходимо сделать таблицу для размеров товаров. Сайт на Опенкарте. Желающим вышлю сайт с которого нужно сделать аналог. Подробности по запросу.
[u]В определенных категориях[/u] (предоставлю ID для каких, у остальных надо все оставить так, как есть) необходимо сделать вывод блока текста, т.е страница будет выглядеть так: 1) Заголовок категории 2) Вывод текста 3) Вывод материалов в этой категории Вывод текста, ...
Нужно создать онлайн игру Русское Лото на деньги, что то вроде этой [url=https://minigames.mail.ru/info/russkoje_loto]https://minigames.mail.ru/info/russkoje_loto[/url] Поэтапная оплата