Создать две простые программы

1-ая программа. Есть текстовый файл, где записаны списком урлы внутренних страниц разных доменов, надо отчистить все дубликаты по первому уровню домена. На чем будет написана значения не имеет.

2-ая программа. Нужно чтобы была возможность добавлять домены и программа в определенный промежуток отправляла к запрос к списку имеющихся, если домен не отвечает выдавала ошибку, что такой то домен не работает.