Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Есть mysql база сайтов, сайты находятся в категориях и под категориях

Нужен следующий функционал

Каждый сайт и 20 внутренних страниц сайта проверяеются на наличие кодов рекламных систем

marketgid, redtram, luxup, readme.ru, gnezdo.ru, novoteka, directadvert, adfox

Вот к примеру

http://www.woman.ru/dreams/dreams-nature/

там есть системы

novoteka

redtran

marketgid

adriver

luxup

если рекламный блок найден, то нужно выбирать ссылки из этих рекламных блоков (в некоторых рекламных блоках ссылки выводятся не напрямую (через javascript)), текст ссылок и картинки. Затем заходить по этим ссылкам, делать скриншот страницы, нужно учитывать что иногда есть промежуточная страница, тогда с нее нужно переходить на конечную, записывать title-страницы. (Если ссылка не прямая, а на страницу с заголовками новостей (как на marketgid) – то нужно получить сначала прямую ссылку на сайт.

так жеесли это был баненр то картинку сохраняем в базу. если объявление с картинкой то картинку и текст .

Если в блоке 3 объявления то нужно сохранять все 3 и все 3 раза идти по ссылкам.

Парсер должен работать многопоточно, не класть сервер и не съедать все ресурсы. Должен быть установлен на сервер под freebsd

Парсер должен записывать всю информацию в новую базу mysql

Останавливать запускать, настраивать скорость парсинга

настраивать время запуска (планируется что парсер будет каждую неделю делать обход всей базы, соответственно в базе должна записывться динамика) Т.е. первый полный обход, второй, и.т.д.

На сервере работает FreeBSD

Бюджет 300 долларов

14 лет назад
alexalexalex
Борисов 
37 летРоссия
16 лет в сервисе
Был
12 лет назад
  • Похожие заказы
  • $250

    1. Необходимо переделать модуль поиска и бронирования http://213.169.68.238/web/Extra/DynamicOffers.aspx на более удобный (например http://www2.turtess-online.com.ua/search/) и встроить в страницу с дизайном 2. Модуль авиабилетов с такого http://213.169.68.238/web/Extra/AviaQuotes.aspx на примерно такой http://www.turtess-online.com.ua/avia/ и встроить в страницу с ...

    Закрыт
    14 лет назад
  • $300

    http://dl.dropbox.com/u/2260475/broker.7z - там в папке protected/data лежит база в формате для mysql workbench, а также sql скрипт Требуется выполнить сайт, продающий финансовые услуги нескольких партнеров. Основной функционал – регистрировать заявки на те или иные услуги, автоматически ...

    Закрыт
    14 лет назад
  • Добрый день уважаемые Фрилансеры. Требуется программист для выполнения следующего проекта: Необходимо реализовать сайт - каталог товаров, с возможностью авторизации и заказа товара. Дизайн разрабатывать не надо. ТТХ сайта: Заказ товара должен быть упрощен до следующего вида: После того как выбранный ...

    Закрыт
    14 лет назад
  • Разместить 50 объектов по москве и московской области ( описание и фотки предоставляются ). Красифо оформить: разное оформление меток, появление фоток у меток и т.д.

    Закрыт
    14 лет назад
  • Необходимо немного видоизменить отображение категорий, в частности что бы название категории отображалось под картинкой. Плюс почему то при просмотре категории на сайте перестают работать два flash элемента, подключенных через произвольный HTML модуль. Подробности в асе 201435240

    Закрыт
    14 лет назад
  • Требуется создание модификации, который поможет сделать форум удобнее в плане споров. Требуется, чтобы каждый, кто (в определённой теме) проголосовал на опросе, имел в верхней части всех своих сообщений ЭТОЙ ТЕМЫ строку (выделенную) формата: ---- В споре (заголовок ...

    Закрыт
    14 лет назад
  • Нужен специалист по Share Point Строго - Москва, наличие номера пенсионного страхования, опыт работы с Share Point. Задача: есть сверстанный шаблон нового дизайна, который не удается интегрировать в Share Point. Возникают кнфликты и перекосы. Чтобы их избежать, ...

    Закрыт
    14 лет назад
  • Нужно поставить скрипт онлайн консультанта на сайт. Пример рабочей функции можно посмотреть на сайте: www.planetaswarovski.ru (ждем 60 секунд и видим то, что нужно) В дальнейшем такую работу необходимо будет провести на нескольких сайтах а так же расширить ...

    Закрыт
    14 лет назад
  • $20

    Здравствуйте. Имеется серверный переводчик текста. Все работало хорошо, однако в последнее время, скрипт перестал переводить текст на нужные мне языки. Кто готов взяться за исправление ошибок? Перевод реализован через Google API.Скорее всего изменилось что-то в ...

    Завершен
    14 лет назад