Необходимо найти дубли и неизвестные страницы

Остап12 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
28.01.2013

Здравствуйте.

Ситуация следующая.

Информация из Вебмастер.Яндекс:

Страниц в поиске 5036

Загружено роботом 8770

Исключено роботом 3385

8770-3385=5385

5385-5036=349 (данные страницы не попали в индекс, правильно?)

Но на сайте всего 4876 страницы (sitemap.xml)

5036-4876=160 неизвестных страниц. Необходимо определить, какие это страницы

На одном из форумов рекомендовали программу Screaming Frog SEO Spider.

Прошу отозваться оптимизаторов, у которых есть подобный софт и готовых решить задачу.

Спасибо.

Заявки фрилансеров