Робот поисковик

Из некоторого текстового файла должны вычленяться ссылки. Программа должна переходить по этим ссылкам, производить поиск по страничке по заданным словам, искать ссылку на этой странице, скачивать по ней файлы (rar, doc, xls), производить поиск уже в этих документах.

При обнаружении искомого слова, сохранить пакет скачанных документов на диск.

ПРедусмотреть возможность скармливания программе исходного файла в котором уже прописаны ссылки по которым следует производить поиск.