В наличии программа мониторинга соцсетей. Десктопное клиент-серверное приложение для windows на базе MySQL написано в Qt на C++ Одна из соцсетей - Instagram.
Из-за защиты соцсети Instagram от несанкционированного сбора данных этот самый сбор работает некорректно. Необходимо проанализировать код программы и принять меры по устранению нарушений в сборе данных. Например, рандомизировать запросы, увеличить паузы между запросами, добавить использование прокси, сократить объем первичного сбора истории.
Есть и другие проблемы в модуле Instagram. Например, проблема записи полученного сообщения в базу. Вот пример лога об ошибке. Это одна из имеющихся ошибок.
[13:06:54.745][AWordWorkerPrivate:392]Post: QMap(("owner_id", QVariant(qlonglong, 32300671806))("photo_url", QVariant(QString, "https://scontent-hel3-1.cdninstagram.com/v/t51.2885-15/e35/177491576_316753496696705_2870955396616518937_n.jpg?tp=1&_nc_ht=scontent-hel3-1.cdninstagram.com&_nc_cat=105&_nc_ohc=7CYP-_dVEB4AX9iqGy2&edm=ABZsPhsAAAAA&ccb=7-4&oh=28446eb308797048dc77a6b297ab8a4c&oe=6088CD52&_nc_sid=4efc9f"))("post_dt", QVariant(QDateTime, QDateTime(2021-04-26 13:04:36.000 RTZ 2 (????) Qt::TimeSpec(LocalTime))))("post_id", QVariant(QString, "COIAnQljb1O"))("text", QVariant(QString, "Крик души Русской женщины\n.\n.\nЗа РЕПОСТ спасибо!! \n#революция \n#путинхуйло #путинвор \n#политика #бунт \n#разруха #навальный \n#николайбондаренко\n#прорыв #крикдуши #freenavalny")))
Задача заключается в определении основного цвета изображений, используя URL из Excel. Необходимо проанализировать несколько пикселей изображения для получения более точного результата. В случае наличия двух основных цветов, выводить их в формате 'цвет1, цвет2'. Игнорировать белый цвет, если он является фоном.
Необходимо построить ER и ST диаграммы для автоматизированной информационной системы 'Банк данных насаждений парков'. Диаграммы можно создавать в любом удобном построителе. В системе хранятся данные о высаженных растениях, включая уникальный номер, дату высадки и возраст растения.
Необходимо спарсить базу контактов с платформ Авито, Юла и Яуслуг, выбирая данные по одному конкретному региону. Ожидается получение актуальной информации для дальнейшего использования.
Требуется разработать грамматики для Томита-парсера, позволяющие извлекать факты из текстов резюме кандидатов. Необходимо создать набор грамматик, словарей, конфигурационных файлов и файлов описания фактов, которые будут сохраняться в формате XML. Ориентируйтесь на примеры резюме для повышения точности извлечения данных.
Требуется провести парсинг данных дверных производителей и дилеров по всей России. В выгрузке необходимо указать название компании, email, телефон и информацию о продаже оптом или в розницу.
Требуется разработка парсера для ежедневного сбора данных с сайта kad.arbitr.ru, включая поиск телефонов из каталогов организаций. Вся работа должна быть выполнена за 4-5 часов. Подробное техническое задание будет предоставлено.
Необходимо создать парсер на PHP, который будет выполнять поиск в Google по запросам из базы данных MySQL и сохранять результаты обратно в базу. Ожидается работа с MySQL для формирования запросов и записи результатов. Подробности будут предоставлены в переписке.
Требуется починить существующие или разработать новые парсеры для сайта на OpenCart. Загрузка данных в базу через API поставщиков в формате XML. Парсинг товаров, категорий и фотографий с актуализацией цен раз в сутки. Обновления не должны касаться связей товара с дополнительными категориями. Работа через БС или постоплата. Текущие парсеры написаны на PHP.
Требуется разработать Telegram-бота, который будет собирать данные клиентов и сохранять их в базе данных или Google Таблицы. Бот должен соответствовать техническому заданию и обеспечивать удобный доступ к собранной информации.
Необходимо разработать клиентское приложение, использующее существующую базу данных PostgreSQL. Интерфейс должен быть минималистичным. Также требуется добавление нескольких триггеров и процедур в базу данных для обеспечения необходимого функционала.
