Доработать краулер сайта

Есть краулер на python + scrapy (http://scrapy.org/), заточенный на сбор информации с одного сайта. Сайт через некоторое время (достаточно продолжительное) банит машинку с краулером по ip. Нужно доработать краулер таким образом чтобы он обошел это ограничение. Конечный результат - полностью распаршенный сайт(url сайта дам в привате).