Парсер объявлений с сайта cian.ru на Python
Задача
Основные требования:
Python 3.9
Библиотеки Selenium 4, BeautifulSoup, python-telegram-bot
Структура под написание доп. модулей парсинга других площадок.
Из .env берем константы:
1. URL фида
2. Время паузы между повторным обходом по объектам
3. Telegram user ID руководителя
4. Название агентства (чтобы отличать конкурентов)
Примерное описание функционала программы:
1. Парсим код xml-фида по ссылке: ******* с адресами и параметрами объектов
2. По очереди берем данные каждого объекта и находим объявление о его продаже/сдаче в аренду на сайте cian (по адресу и параметрам)
3. Также находим объявления конкурентов(других агентств + собственника) по этому же объекту
4. Сохраняем в файл информацию по этому объекту и конкурентам (цена, сссылка, название агентства/собственник, дату размещения)
5. Если цена объекта в объявлении конкурента ниже, чем в объявлении из xml-фида, то делаем отправку сообщения в Telegram сотруднику, ответственному за этот объект с информацией об объекте/конкуренте/его цене/...
6. После прохода по всем объектам отправить результирующий отчет по всем объектам в Telegram руководителя.
Добрый день! Что требуется сделать: Функциональность бота должна быть следующей: мы говорим сколько «человек» (на самом деле ботов), сколько посещений сделают за какое количество времени на каком сайте с определенным интервалом времени. Бот должен рандомно распределить сколько ...
Сделать форму для расчета рентабельности. Вставляешь значения, автоматически считает. Фаил для отправки в месенджире.
Требуется приложение, которое умеет БЕЗ БРАУЗЕРА выполнять авторизацию на сайте VDELO.PRO и поддерживать дальнейшую сессию. Авторизация выполняется через ГосУслуги. После авторизации нужно получить access и refresh токены и сохранить в памяти. При истечение срока действия токенов или протухании ...
Доброго времени суток! Я разрабатываю проект (треугольный арбитраж) который ищет спред (разницу между отношениями цен) для криптовалют, но возникли некоторые сложности с правильной формулировкой кода/формул для вычисления некоторых ситуаций. Уже более детально опишу в личных ...
Нужно написать бот для приложение чтобы делал рассылку
1. серверное на сокетах, прослушивающее заданный TCP порт. По факту входящего соединения запускать второе приложение, деллигировать ему сокет и продолжать слушать порт 2. Работает в два потока. Поток А: Разбирает client_hello в tls находит доменное имя и согласно таблицы ...
1. имя файла вместо out.csv - должно быть именем спарсеной категории 2. парсер на 10 потоков в одном приложении (то есть 10 строк программе для ссылок откуда парсить) ...
Ребят, есть такой файл, надо спрасить из него матчи, у 1 матча есть 2 команды и ионформация об игроках, нужно создать адеватный json который потом можнна обработать мне. То есть задача: в json помещять информацию ...
Необходимо написать несколько поисковых шаблонов регулярные выражения Regex для парсинга текстового чата. На вход подается текстовый поток (текстовые файлы), на выходе результат поиска согласно поисковому шаблону. Язык особого значения не имеет, тестироваться будет на Java/C#.
