Спарсить актуальную базу сайтов

Нужно спарсить каталоги сайтов (Яндекс Каталог, Dmoz, Mail.ru, Rambler, liveinternet.ru). Достать адреса, определить параметры тиц. Удалить дубли. Произвести проверку сайтов на наличие в каталоге (ссылка будет). Провести сортировку.