Требуется спарсить все новости с сайта в БД
Александр8 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
15.02.2018
Нужно спарсить все новости с сайта и поместить их в БД.
Требуемые данные:
- Заголовок статьи;
- Дата статьи;
- Текст статьи (с html-вложениями и с учетом возможной пагинации (разбивка статьи на страницы));
- Ссылка на статью;
- Раздел сайта в котором находилась статья
В первый проход нужно загрузить все имеющиеся, далее только новые.
Запуск должен происходить по планировщику с возможностью указания периодичности запуска (раз в сутки)
При недоступности сайта, должно отправляться уведомление на указанную почту