Написать парсер

  1. Биржа фриланса
  2. Веб-программирование
Закрыт4 заявки1634 просмотра

Здравствуйте

Нужен парсер который будет работать на сервере. Скорее всего на PHP но рассмотрю другие предложения

Сайты которые нужно парсить:

NTSK ([url=http://board.ntsk.ru/index.php?r=category&ads_city=5562&category_id=14&ads_type[]квартиры, комнаты, [url=http://board.ntsk.ru/index.php?r=category&ads_city=5562&category_id=12&ads_type[]дома)

avito

ЦИАН (квартиры, дома, комнаты)

мультилистинг

Схема работы парсера:

  • Парсер собирает информацию с сайтов из списка с заданной периодичностью (например 10 минут).
  • Телефонные робот обращается к парсеру по API (http запросом) и забирает новые номера, с той же периодичностью.
  • После того как робот выполнит свою работу он внесет новые данные для элементов и отметит обработанные элементы (в данном случае объекты недвижимости), таким же способом как и забрал через API http запросом.
  • Парсер по апи отправит отмеченные элементы по API в CRM систему. (CRM еще не определена, но точно там будет API)
Требования к парсеру:

  • Использование прокси и обход блокировок со стороны сайтов указанных сайтов
  • Возможно использование базы данных если это целесообразно.
  • Собираем только новые объявления
  • Проверка на дубли по номеру телефона и количеству комнат и типу недвижимости. Дубли исключаем
Данные которые парсим:

  • Ссылка на объявление
  • Имя
  • Номер телефона
  • Название объявления
  • Тип недвижимости
  • Количество комнат
  • Описание
  • Ссылки на фотографии
  • Цена
  • Адрес (Город, улица, дом, квартира)
  • Этаж
  • Общая площадь
Прошу сразу сделать предварительную оценку бюджета или вилку что бы каждому не писать в ЛК сколько это стоит. Если есть уточняющие вопросы задавайте в отклике.
PHP
5 лет назад
orchanin
Евгений 
39 лет
10 лет в сервисе
Был
3 года назад

Заявки фрилансеров

Ильдар
 
45 лет
16 лет в сервисе
Был
4 часа назад
94 отзыва(-1)
4 года назад
Роман
 
37 лет
5 лет в сервисе
Был
5 лет назад
5 лет назад
Аркадий
 
25 лет
7 лет в сервисе
Был
4 дня назад
47 отзывов
5 лет назад
Евгений
 
39 лет
17 лет в сервисе
Был
5 часов назад
558 отзывов(-1)
5 лет назад
ТОП-5
— Веб-программирование

  • Похожие заказы

  • Срочно необходим специалист по node.js для доработки бота.

    Требуется специалист по node.js для доработки бота, связанного с криптовалютами. Обязателен опыт работы с криптобиржами и их API. Часть проекта уже выполнена, ожидается работа с предоставленным техническим заданием.

    Node.js
    Веб-программирование1 заявка
    Закрыт
    4 года назад

  • Кэширование списка пунктов доставки модуля Boxberry в mysql

    Разработать решение для кэширования списка пунктов доставки модуля Boxberry в MySQL. Необходимо обновлять данные раз в день и использовать кэш для минимизации запросов к API при обновлении корзины, а также выполнять запросы только для расчета доставки.

    MySQL
    Веб-программирование2 заявки
    Закрыт
    4 года назад

  • Скрипт

    Требуется разработка скрипта, который будет преобразовывать укороченные ссылки одностраничного сайта и Телеграфа в полные. Скрипт должен быть интегрирован в панель инструментов Chrome для удобного запуска. После выполнения скрипта должна быть возможность скопировать весь сайт с уже преобразованными ссылками.

    Веб-программирование1 заявка
    Закрыт
    4 года назад

  • Скрипт

    Требуется разработать скрипт, который будет преобразовывать укороченные ссылки одностраничного сайта и платформы Телеграф в полные ссылки. Скрипт должен включать кнопку в браузере Chrome для запуска, а также обеспечивать возможность копирования всего сайта с уже полными ссылками. Уточнения и вопросы принимаются.

    Веб-программированиенет заявок
    Закрыт
    4 года назад

  • VUE.JS программист

    Требуется опытный VUE.JS программист для доработки фронтальной части проекта. Необходимо установить новый дизайн на старый сайт и доработать функционал. Проект основан на Laravel. Работа по договору, только для граждан РФ.

    LaravelVue.js
    Веб-программирование1 заявка
    Закрыт
    5 лет назад

  • Нужно сделать 2 фильтра постов на wordpress

    Требуется разработать два фильтра для постов на WordPress: один по тегам на страницах материалов, другой по времени публикации (месяц, год) на страницах категорий и тегов. Необходима оперативная реализация, чтобы завершить работу завтра. Укажите цену за выполнение.

    WordPress
    Веб-программированиенет заявок
    Закрыт
    5 лет назад

  • Нужно выполнить парсинг товаров с сайта

    Необходим парсинг товаров с указанного сайта для дальнейшей загрузки на платформу Wix. Доступ к админ панели отсутствует. Шаблон для выгрузки товаров прикладывается. Уточнение адреса сайта будет предоставлено. Ищем специалистов по веб-программированию для выполнения задачи.

    Wix
    Веб-программирование5 заявок
    Закрыт
    4 года назад