Написать парсер

Веб-программированиеЗакрыт4 заявки1634 просмотра
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Здравствуйте

Нужен парсер который будет работать на сервере. Скорее всего на PHP но рассмотрю другие предложения

Сайты которые нужно парсить:

NTSK ([url=http://board.ntsk.ru/index.php?r=category&ads_city=5562&category_id=14&ads_type[]квартиры, комнаты, [url=http://board.ntsk.ru/index.php?r=category&ads_city=5562&category_id=12&ads_type[]дома)

avito

ЦИАН (квартиры, дома, комнаты)

мультилистинг

Схема работы парсера:

  • Парсер собирает информацию с сайтов из списка с заданной периодичностью (например 10 минут).
  • Телефонные робот обращается к парсеру по API (http запросом) и забирает новые номера, с той же периодичностью.
  • После того как робот выполнит свою работу он внесет новые данные для элементов и отметит обработанные элементы (в данном случае объекты недвижимости), таким же способом как и забрал через API http запросом.
  • Парсер по апи отправит отмеченные элементы по API в CRM систему. (CRM еще не определена, но точно там будет API)
Требования к парсеру:

  • Использование прокси и обход блокировок со стороны сайтов указанных сайтов
  • Возможно использование базы данных если это целесообразно.
  • Собираем только новые объявления
  • Проверка на дубли по номеру телефона и количеству комнат и типу недвижимости. Дубли исключаем
Данные которые парсим:

  • Ссылка на объявление
  • Имя
  • Номер телефона
  • Название объявления
  • Тип недвижимости
  • Количество комнат
  • Описание
  • Ссылки на фотографии
  • Цена
  • Адрес (Город, улица, дом, квартира)
  • Этаж
  • Общая площадь
Прошу сразу сделать предварительную оценку бюджета или вилку что бы каждому не писать в ЛК сколько это стоит. Если есть уточняющие вопросы задавайте в отклике.
PHP
3 года назад
orchanin
Евгений 
38 летРоссия
9 лет в сервисе
Был
2 года назад
  • Похожие заказы

  • Срочно нужен PHP разработчик для доработки сайта

    Срочно нужен PHP разработчик для доработки сайта Требуется доработать валидацию форм на сайте на PHP. Сделана большая часть работы по сайту. Предпочтительно общаться через телеграм: Кандидату на работу вышлю подробное ТЗ в телеграме.

    PHPСайт на PHP
    Веб-программирование5 заявок
    Закрыт
    3 года назад

  • Срочно необходим специалист по node.js для доработки бота.

    Срочно необходим специалист по node.js для доработки бота. Нужно доработать бота по тематике криптовалют. Обязателен опыт с криптобиржами и их API. Часть проекта уже выполнена. Предпочтительно общаться через телеграм: Кандидату на выполнение задания вышлю оттуда тз.

    Node.js
    Веб-программирование1 заявка
    Закрыт
    3 года назад

  • Срочно нужно запустить сайт на node.js и vue.js

    Проект состоит из бекенда на node.js и фронтэнда на vue.js. Начата работа над шаблоном на vue.js. Необходимо его закончить и разработать бэкенд по ТЗ. Предпочитаю общаться в телеграме: Пишите туда. Подробное техническое задание вышлю кандидату на выполнение ...

    Node.jsVue.js
    Веб-программирование5 заявок
    Закрыт
    3 года назад

  • Кэширование списка пунктов доставки модуля Boxberry в mysql

    Модуль запрашивает  по апи на каждое обновление в корзине весь список пунктов, что приводит к чрезмерному трафу и торможению формы. Надо эти пункты 1 раз в день класть в таблицу, а остальные разы из нее ...

    MySQL
    Веб-программирование2 заявки
    Закрыт
    3 года назад

  • Скрипт

    Здравствуйте. Нужно написать скрипт, который преобразует укороченные ссылки (одностраничного сайта, телеграф) в полные. (30-80шт) Телеграф - платформа для публикации текста. Расположенный по адресу [url=http://telegra.ph/]telegra.ph[/url] В хроме на панели инструментов расположить кнопку запускающую данный скрипт. После выполнения скрипта должна быть возможность ...

    Веб-программирование1 заявка
    Закрыт
    3 года назад

  • Скрипт

    Здравствуйте. Нужно написать скрипт, который преобразует укороченные ссылки (одностраничного сайта, телеграф) в полные. (30-80шт) Телеграф - платформа для публикации текста. Расположенный по адресу [url=http://telegra.ph]telegra.ph[/url] В хроме на панели инструментов ...

    Веб-программированиенет заявок
    Закрыт
    3 года назад

  • VUE.JS программист

    Нужен опытный VUE програмист доделать фронт проекта. Бэка на ларавель Программист нужен высокого уровня Задача - поставить новый дизайн на старый сайт + местами доработать и расширить функционал. Работа по договору Для граждан РФ Оставляйте ТЕЛЕГРАМ

    LaravelVue.js
    Веб-программирование1 заявка
    Закрыт
    3 года назад

  • Нужно сделать 2 фильтра постов на wordpress

    Всем добрый вечер. Нужна ваша помощь. Нужно сделать 2 фильтра постов. Конктретнее: 1 фильтр по тегам на страницах : http://aamm.waytosummit.com/index/ http://aamm.waytosummit.com/all-materials/ 2 фильтр по времени рубликации ( месяц, год) на страницах: http://aamm.waytosummit.com/category/ и на шаблоне тегов и категорий http://aamm.waytosummit.com/tag/2020/ у кого есть вопросы - отвечу, нужно ...

    WordPress
    Веб-программированиенет заявок
    Закрыт
    3 года назад

  • Нужно выполнить парсинг товаров с сайта

    всем добрый день! мне нужно выполнить парсинг товаров с сайта. сайт не мой, доступа к админ панели нет. парсинг нужен для дальнейшей загрузки товаров на сайт конструктор wix. кому интересно предложение, оставляйте пожалуйста заявку, либо в лс. адрес ...

    Wix
    Веб-программирование5 заявок
    Закрыт
    3 года назад