Парсинг данных с сайта с защитой Сloudflare
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.
Задача: собрать отзывы с сайта. Сайт защищен от парсинга сервисом Сloudflare, дополнительно имеет ограничение на кол-во запросов с Ip.
Решение - автоматизированный сбор данных при помощи браузера Chromium, имитирующего действия обычного пользователя.
Языки: JavaScript, Json, CSS-селекторы
Технологии: Node.js, библиотека GoogleChrome/puppeteer, база данных MongoDb