Скрипт Парсера 'Скачать сайт целиком' на PHP
Алексей14 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
30.09.2015
Нужен скрипт на php, чтоб мог скачать все файлы, картинки, стили, ява скрипты и т.п с сохранением всех урлов!
подробное ТЗ:
Например вводим нужный сайт http://domain.ru
Собираем все внутрн. урлы на этом сайте и сохраняем в txt файл
после, парсим все урл по порядку и все что лежит именно на этом сайте, то сохраняем, если ссылки внешние, то пропускаем.
Скрипт не должен сохранять файлы повторные!
Все пути к стилям, картинкам, js и любым другим файлам должны быть правильны!
Скрипт должен уметь парсить сайты более 100 000 страниц, время выполнения не важно!
Все урлы должны быть действительны, т. е без порезки! Если только указаны спец символы '? &' то меняем на символ '_'
Пока вроде все..
Пишем цену, готовое решение приветствуется!