Парсер картинок. Итог: csv + jpg в zip

Веб-программированиеЗакрыт3 заявки198 просмотров
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Требуется парсер картинок зданий с ресурса гдеэтотдом.ру

Я предоставляю: VPS сервер /на который надо будет поставить парсер/, доступ к проксям через сервис hideme.ru и список адресов, ок. 200 000, в формате csv /1 столбец - Улица; 2 - номер дома/.

Итог работы парcера: csv файл с 3 столбцом, в строках которого прописаны через запятую имена фоток для конкретного адреса + zip архив фотографий.

Скорость работы - должна быть высокой, потоков в 20, по 3-5 сек. на поток/ адрес, итого: 200 000 адресов - спарсить надо часов за 13. Поэтому, надо предусмотреть систему продолжения работы с момента сбоя/ остановки и решения по обходу банов.

Из функционала: выбор и загрузка файла для обработки (в архиве zip - потом его скрипт распаковывает на хостинге и обрабатывает, ибо файлы весят по 50 и более мб. и могут быть сбои при загрузке); Кодировка файла для обработки/ c результатом win1251. Максимальное количество картинок: 1 - все. Количество потоков: 1 - 20.

Уже есть наработки по данному направлению - проблема в изменении исходного кода на источнике. Исходники передам, помогут в работе.

Фактически, надо доработать имеющийся парсер. Во вложении блок кода для ориентира.

Так же интересyют парсерs: cian.ru irr.ru sob.ru avito.ru slando.ru и других досок, раздел недвижимость.

Вторым этапом данного проекта будет адаптация скрипта для сайта-каталога недвижимости. Задача: подгрузка картинок по адресу в том же формате из нескольких источников: гугл, яндекс и ged карты.

В тендере заполняем срок- не горят, бюджет - комфортный, комментируем макс. детально, задаём вопросы прямо в поле предложения.

Рассмотрю все предложения, они скрыты.

11 лет назад
5050482
41 годРоссия
17 лет в сервисе
Был
3 года назад
  • Похожие заказы

  • Проблема со слайдером блоков текста

    $5

    Слайдер содержит блоки текста. Слайды сначала идут справа налево, потом обратно. При листании блоков СЛЕВА НАПРАВО(!!!) от строчек текста на фоне остаются жёлтые полосы в браузерах хром, опера и сафари. Прикрепил скриншот. Просьба помочь. ...

    Веб-программирование2 заявки
    Закрыт
    11 лет назад

  • Парсинг курса валют

    $50

    Необходимо написать скрипт на PHP, выполняющий парсинг курсов валют с сайта http://www.xe.com. Запрос к сайту вида http://www.xe.com/currencytables/?from=USD&date=2012-12-07, где дата формируется автоматически на текущий день. Скрипт будет выполнятся раз в день путем запуска из «крона». Результаты выполнения ...

    PHPMySQL
    Веб-программирование1 исполнитель
    Завершен
    11 лет назад

  • Битрикс - импорт товаров

    1.1. Необходимо разработать импорта *.CSV файлов. 1.2. Импорт может быть представлен как на отдельной страницы ПУ, так и на отдельной странице. 1.3. При импорте, если артикул в импортируемом файле совпадает с артикулом введенном на сайте, то у товара ...

    Битрикс
    Веб-программирование3 заявки
    Закрыт
    11 лет назад

  • Создание сайта фотографа на Flash

    Нужно срочно сделать сайт свадебного фотографа, очень простой. Три рубрики всего. С возможностью добавления фотографий через XML. Присылайте ваше портфолио или ссылки на работы. С агентствами не работаю

    Flash
    Веб-программирование10 заявок
    Закрыт
    11 лет назад

  • Скрипт оценки резкости фотографий (желательно C++)

    Требуется программинг по обработке изображений. Желательно на C++ (так как нагрузка будет большая), но с тем что бы заработал на моём сервере. Если будет чего-то не хватать для работы - поставим. Смысл такой: тестирование фототехники. Есть картинка ...

    Веб-программирование1 заявка
    Закрыт
    11 лет назад

  • Разработать виртуальную примерочную на Flash

    $250

    Всем привет. Есть задача - разработать виртуальную примерочную для магазина очков. К примеру как тут: http://www.my-spexx.de/shop/brillen/nerd-brille-klassisch-schwarz-lbc8053-c1.html . Большую часть задач мы реализуем с помощью jQuery, однако есть ряд моментов, где без флеша не обойтись. Например ...

    HTMLjQueryFlash
    Веб-программирование2 заявки
    Закрыт
    11 лет назад

  • Интернет магазин OpenCart

    $250

    Требуется сверстать и встроить в OpenCart дизайн, плюс некоторые доработки. (Загрузка прайс листа с Excel). Ищется ответственный исполнитель для постоянного сотрудничества. Кандидаты без опыта работы с OpenCart не рассматриваются.

    OpenCartExcel
    Веб-программирование10 заявок
    Закрыт
    11 лет назад