Написать граббер-парсер-постер для портала

Веб-программированиеЗакрыт1 заявка136 просмотров
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Есть такая задача. Если вкратце: нужно серверное приложение, интегрированное в портал форумного типа(как yaplakal.com, fishki.net)

Что оно должно уметь:

1) Парсерная часть(по списку ключевых слов):

а) парсинг информации с ряда сайтов - с функцией визуального парсинга. То есть должен быть некий интерфейс-окно, в котором открывается целевой сайт. После чего – мышью выделяется участок сайта, который должен парситься в дальнейшем. Интерфейс запоминает этот участок сайта и в дальнейшем парсит информацию из него. А также-самообучается(запоминая формы и типичные места кода у разных сайтов). Как мне кажется, это даст более гибкую возможность добавления сайтов-доноров для парсинга, чем «жестко зашить» ряд сайтов для парсинга на основе тех же регулярных выражений. (или предложите свой вариант гибкого добавления для парсинга почти любых сайтов)

б) Парсинг групп вконтакте:

2) Постерная часть:

а) Постинг в заранее определенные в интерфейсе администратора разделы сайта(допустим из групп 1-4 вконтакте- в раздел сайта «новости», и т.д.), планировщик парсинга, миксер(чтобы можно было перемешивать заданным образом входящий контент из разных групп-об этом еще поговорим подробнее);

б) Перепостинг в другие группы вконтакте – (то есть напарсенная из разных групп информация картинок, видео — с комментариями/без комментариев) - постится в указанную группу/группы(с размещением/без размещения на картинках-ватермарка с логотипом целевой группы). Этот раздел постера открыт не только для администратора-но и для всех пользователей портала:

• наличие личного кабинета — авторизации пользователя, запоминания его настроек-целевой группы, групп — доноров для граббинга, адресов сайтов для взятия RSS;

• наличие планировщика граббинга (брать раз в минуту, 5 минут, 1 раз в час и т.д.)

• борьба с капчей — выходящей при активном постинге (дешифровка капчи)

Кое-какие нюансы будут - но это – суть. Это приложение после изготовления должно будет быть интегрировано в CMS. Какая именно будет cms- пока точно не скажу- думаю. Наверное invision power board, joomla или DLE.

Внимательно рассмотрю любые предложения!

JoomlaDLE
12 лет назад
DANSEA
Айдар 
44 годаРоссия
13 лет в сервисе
Был
2 года назад