Поиск

Нужен каталог сайтов с поисковиком по каталогу + поисковый бот, который будет индексировать сайты определенного типа поддоменнов заданных в конфиге (например только net.ru) бот будет просматривать эти сайты и индексировать страницы, keywords, description, "цепляться" за ссылки на другие сайты с возможностью дальнейшего публичного поиска в полученной индексной базе с возможностью отбора/сортировки по релевантности, по дате, размеру, типу файлов и т.д. Так же бот должен будет просматривать все страницы сайтов внесенные в каталог (в каталог будут внесены сайты только домена net.ru, например). К боту нужно написать демона который будет проверять нагрузку сервера и если она большая уменьшать колличество запросов бота. Ну и все это естественно будет иметь свою базу.

Сама задача, предельно ясна, нужен «сжатый» поисковик который будет искать, индексировать и сохранять в кеше сайты одного домена, остальные будут проигнорированы. Более точное ТЗ по поиску будем делать совместно. В дальнейшем, нужны будут всяческие улучшения, человек нужен ответственный и постоянный. Как Вы понимаете, скорее Вы уже имели дело с такими проектами и у Вас отличные знания написания серверных приложений для unix на C++.