Парсер англоязычных ресурсов

Веб-программированиеЗакрыт11 заявок225 просмотров
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Парсер perl\php заданных сайтов.

Суть парсера в извлечении полной базы больших англоязычных сайтов.

Структуру бд обсуждаем заранее. В принципе суть на всех сайтах одинакова: категории и типы объектов и сами объекты.

Рассмотрим на конкретном примере, берем сайт atvtraderonline.com. Сайт состоит из тысяч листингов(ориентировочно 15тыс), категорий и производителей.

Берем листинг, скажем atvtraderonline.com/find/listing/2009-YAMAHA-RHINO-94690776 , отсюда нам понадобятся: VEHICLE DETAILS, description,цена и 1 фото.

В бд должен храниться ИД изначального листинга на сайте-доноре. Так как в будущем потребуется обновление базы и проверка будет осуществляться по этому ИД. Скрипт запускается в кроне с определенной периодичностью, проверяя наличие новых листингов.

Возможно совмещение парсинга нескольких сайтов в одну бд. Скажем парсим листинги по продаже бу машин с нескольких сайтов в одну бд.

Скрипт само собой не должен падать наглухо из-за каких-то недочетов.

Реализация на perl(оч желательно) или php. Главное - понятный, легко обновляемый и дополняемый функционал.

Сами парсеры для конкретных сайтов у меня имеются, мне нужен человек на постоянные подобные задачи. Поэтому лучше, чтоб изначально написал свое дабы в своем коде понимать что, где и как.

Тобишь изначально вы пишете каркас, который в будущем, слегка переделав, используете для парсинга след сайта.

Работа не сложная и постоянная. Поначалу подобные задачи будут где-то раз в 1-2 недели. Жду конкретных предложений с примерами кода.

Оплата в ВМ евро.

спасибо

PHPPerl
15 лет назад
exfinancier
Владимир 
41 годРоссия
17 лет в сервисе
Был
6 лет назад
  • Похожие заказы

  • Форма заказа билетов

    $25

    Нужно создать форму бронирования автобусных билетов, включающую в себя набор полей. (пример на рисунке) При этом в ней будут 2 связанных между собой выпадающих списка, в одном - города отправления, в другом - сответствующие города прибытия так ...

    Веб-программирование1 исполнитель
    Завершен
    15 лет назад

  • Поправки в уберкарте (Drupal)

    В уберкарте в информации о продукте сейчас выводятся дополнительные поля, мне нужно чтобы они выводились ДО стандартных уберкартовских (цена, описание) и вывод картинки сделать слева от всего текста, а не снизу как оно сейчас. Работы тут, ...

    Drupal
    Веб-программирование2 исполнителя
    Завершен
    15 лет назад

  • Гороскопы скрипт + базу.

    Нужно срочно написать скриптик вывода гороскопов. У кого есть готовый с базой то стучите в асю 805656 - обсудим покупку. Итак что должно быть: 1. форма - ввод имени, даты рождения, времени рождения 2. функции: рассчет знака ...

    PHPSQL
    Веб-программирование1 исполнитель
    Завершен
    15 лет назад

  • Смена платформы сайта

    $1000

    Нам нужно переложить сущуствующий сайт http://carper.su/ на другую платформу. Выбранная платформа 1С-Битрикс.Управление сайтом, редакция "Бизнес". Срок реализации проекта: 3 недели Бюджет: до $1000 Предпочтение отдается специалистам, имеющим опыт интеграции интернет-магазина с 1С. Обязанности: — знание и опыт работы с 1С-Битрикс ...

    PHPMySQLHTMLCSSLinuxAjaxБитриксUnix1С-Битрикс1С
    Веб-программирование1 исполнитель
    Закрыт
    15 лет назад

  • Сделать карту магазинов на Google maps

    Необходимо сделать карту расположения магазинов в Москве и области, реализованную на Google maps. внешний вид точки – нестандартный. магазин – название и описание. пожалуйста, указывайте стоимость и сроки! p.s.: надо сделать только движок добавления объектов, сами ...

    Веб-программирование7 заявок
    Закрыт
    15 лет назад

  • Дописать функции для доски объявлений

    Вот сайт: http://armenavto.ru/ 1)При добавлении объявления, выборе категории автомобили должно открываться дополнительные поля для ввода следующей информации: -Выбор модели -Цена -Объем двигателя -КПП -Руль -Цвет -Топливо -Пробег и так далее. как здесь http://kolesa.kz/a/new/?cat=3 или как тут http://www.auto.free-webhost.ws/index.php?option=com_autobb&v=15&Itemid=29&task=searchPage&category=501 2)Чтобы при расширенном поиске можно было указать ...

    Веб-программирование5 заявок
    Закрыт
    15 лет назад