Простой поисковик по выдоче поисковых систем Bing,Yahoo,Google
1-е поиск по Google,Yahoo,Bing по массиву ключевых слов ... нужно делать выборку по одному ключевому слову и вбивать эти в соответствующие поисковые системы нужно собрать все ответы с как можно большего колличества внутренних страниц ... (page1 ... page10 etc) с учетом таймингов что бы не получить бан от поисковика...
2-е поиск ключевые слова будут сохранены в кодировки utf-8 соответсвенно что бы начать поиск на странице ключегого слова необходимо автоматически определеить кодировку страницы и перекодирывать её в utf-8 ... (iconv...)
3-е на найденых страницах нужно собрать все внутренние и внешние ссылки в массив и соответсвенно проверить и их на содержнание ключевых слов ... и так 3-и уровня проверить ...
4-е запись в базу данных
1. ссылка
2. домен (без www.)
3. поисковый запрос
4. ip адрес сервера
5. GeoIP данные (Country, City, ISP)
6. whois данные
7. текущее время UNIX_TIMESTAMP()