Парсер с выгрузкой в Google Sheets

Прикладное ПО
172 просмотра
06.12.2020
1919×994558 КБ
full.jpg
1920×1080561 КБ
фильтры.jpg
settings.jpg

Парсер нескольких бирж игровых предметов со сведением данных в гугл-таблицу. Всего парсится 3 биржи (Steam, dota2.market, c5game) с обновлением 4ёх таблиц. Периодичность от 5 до 30 минут. Так же программа выводит столбцы с некоторыми синтетическими данными для анализа эффективности перепродажи предметов. При нажатии на цену предмета с определённого сайта (столбцы B,C,D,E) - в новой вкладке открывается страница продажи предмета на бирже. Полностью рабочие фильтры - отдельной трудностью было заставить их не сбрасываться после обновления таблицы. Реализовано на Python - Scrapy, Google API. Для одного из сайтов потребовалась имитация браузера - Splash. Работает на облачном Linux-сервере. Работа парсеров через прокси.
LinuxPython