Парсинг страниц сайта

Иван13 лет в сервисе

Данные заказчика будут вам доступны после подачи заявки

08.07.2014

Нужно спарсить все страницы сайта, используя карту сайта

http://www.wired.com/sitemap.xml

на конечные страницы карт сайта:

http://www.wired.com/sitemap.xml?yyyy=2014&mm=07&dd=08

и сохранить URL страниц в виде CSV со столбцами:

url раздела; URL страницы; дата

получится такой список:

http://www.wired.com/2014/07/tour-de-france-physics/;http://www.wired.com/sitemap.xml?yyyy=2014&mm=07&dd=08;2014-07-08T08:41:57Z