Написать пошаговый скрипт php + JQuery ajax

Скриптец должен делать следующее:

Пользователь нажимает на кнопку "запустить", и видит индикатор прогресса (или просто прелоадер) до тех пор, пока все не закончится. В конце ему выдается ссылка на сформированный файл.

Внутри скрипта происходит следующе: скриптец заходит на главную страницу сайта и парсит с нее все внутренние ссылочки, складывает в файлик, потом проходится по каждой из ссылочек - и делает то же самое. Новые ссылочки дописываются в конец файлика. Если такая ссылочка уже есть - она не пишется по новой. Если ссылочка обработана - ставится маркер.Процесс останавливается после того, как скрипт обойдет все-все-все все страницы сайта.

Если найдете такой готовый скриптец - я заплачу за пояснение его работы (так как потом этот скриптец мне с моими товарищами нужно будет интегрировать в большую систему). Искала готовый сама - не нашла, к сожалению.

Как дополнительное вариативное и необязательное подзадание к задаче: должна быть возможность указать скрипту (в виде файла с регулярными выражениями), чтобы он не обрабатывал некоторые страницы.