Скрипт - бот ходящий по сайтам
Макс18 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
09.04.2010
Нужен скрипт(Желательно PHP) - бот ходящий по сайтам.
Задается список сайтов.
По очереди на эти сайты заходит(желательно с возможностью устанавливать таймаут между сайтами, многопоточность приветствуестя) бот смотрит главную страницу находит на ней 5 внутренних ссылки(стоп слова в ссылках наши работы, контакты, партнеры, форум..)
дальше запускает модуль анализа контента, выгребаются все слова кроме стоп слов(предлоги..) и выстраиваются по частоте упоминаний на странице, первые 10 с параметром адрес страницы и частоты записываются в БД в отношении этого сайта
И в отдельную графу записываются слова встретившиеся на 3-5 страницах.