Парсинг + обработка данных

Веб-программированиеЗакрыт3 заявки180 просмотров
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Здравствуйте. Требуется создать вот какой парсер..

Нужно отпарсить sape.ru на предмет сайтов по определенным критериям ( сайтов планируется около 1000)

После этого:

- занести в БД URL сайтов

- в БД хотелось бы увидеть перначальную дату, по которой делалать проверка сайта (т.е грубо говоря дата появления сайта в БД)

- проверить на проиндексированность в Яндексе указанные сайты

- проверить дату регистрации домена

После этих проверок хотелось бы увидеть результат в виде таблицы ( или в любом другом удобоваримом варианте, эта функция пока еще точно не решена)

В наличии имеется свой сервер, к нему подключено 8 IP-адресов. Я думаю для парсинга индекса в Яндексе этого должно хватить.

В дальнейшем в БД будут заноситься новые сайты ( планирую парсить sape 1 раз в неделю приблизительно), которые первоначально будут проверяться на возраст домена и индекс в Яндексе, а старые записи будут проверяться только на проиндексируемость в Яндексе.

Вот это основная задача скрипта - парсера.. В голове крутится еще несколько мелких "фишек", но это будет детально обсуждать с выбранным исполнителем.

Ожидаю от вас сроков исполнения + приблизительную стоимость работ.

15 лет назад
uaix
35 летУкраина
16 лет в сервисе
Был
год назад
  • Похожие заказы

  • Исправить форму создания альбомов + вывод абзаца

    Для каждого аккаунта должны выводиться только участники этого аккаунта ( а сейчас выводятся все участники всех аккаунтов ) в статическом разделе клиентской части не отображаются абзацы

    Веб-программирование1 исполнитель
    Закрыт
    15 лет назад

  • Доработка Joomla CMS

    Требуется доработка joomla cms, которая дублирует функционал сайта panamoney.net(member area). Дизайн joomla уже сделан, нужно только доработать account чтобы была возможность пополнять баланс(интеграция 2-ух платежных систем alertpay и vmoney), и по несложным формулам начислять юзеру ...

    Joomla
    Веб-программирование2 заявки
    Закрыт
    15 лет назад

  • Сграбить флеш ролик и вставить на наш сайт.

    На сайте фирмы производителя фурнитуры есть флэш ролики, показывающие как работает эта самая фурнитура. Эти ролики необходимо скачать (сграбить) вместе с русской зв. дорожкой и затем вставить в наш сайт немного урезав. Вот здесь ролики: http://www.blum.ru/ru/ru/03/index.php

    Веб-программирование1 исполнитель
    Завершен
    15 лет назад

  • Эротический видеочат

    $1000

    Требуется готовый движок эротического видеочата или изготовление с нуля (1-3 мес). Аналоги: www.ruscams.ru http://www.online-webcam.ru/ Интеграция биллинговых систем (webmoney, смс, yandex, пластик). Поддержка от 10 потоков видео единовременно. Менее значимые опции - Интегрированная партнерская программа. Суть работы в создании скриптов и дизайна или по ...

    Веб-программирование1 исполнитель
    Закрыт
    15 лет назад

  • Портировать игру на Flex

    $1000

    Есть купленые исходники веб MMORPG игры http://eu.baneworld.com/index.php testplayer 123123123 Интересует портирование этой игры в социальную сеть вконтакте (Flex) с сохранением всех ее особенностей. Соответственно, чтобы игра использовала АПИ вконтакте и была многопользовательская. Отдал бы предпочтение команде разработчиков желательно с ...

    Веб-программирование2 заявки
    Закрыт
    15 лет назад

  • Дописать чпу в .htaccess

    $50

    Требуется досостовлять правила преобразования в ЧПУ .htaccess. Составить порядка пяти правил, возможно больше. Пример правила: RewriteCond %{REQUEST_FILENAME} !-f RewriteRule ^(.*/)?group/([0-9]+)/([^/]*)$ /group.php?group_id=$1$2$3 [L] Предлагаю 1 usd за одно правило.

    Веб-программирование1 исполнитель
    Закрыт
    15 лет назад

  • Создание реселинга видеоконференций.

    Только для ПроФИ В настоящий момент нет тз - будем писать вместе. Надо сделать проект: некую сборную солянку webinar.ru. + возможность реселинга (как хостинг http://host.yacenter.ru/cgi-bin/panel/reg.pl ). Т.е. наш клиент подключается - получает некие скрипты - размещает сам ...

    Веб-программированиенет заявок
    Закрыт
    15 лет назад