Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Для формирования БД стримеров на сайте, необходима система регулярного парсинга YouTube и Twitch каналов

На входе файл со списком url каналов

На выходе:

- Данные по каналам в csv & xls

- Данные по видео в xls & mysql

API YouTube НЕ используем!

Для успешного парсинга можем использовать прокси. Список доступных прокси берем из локального config-файла

Парсер д.б на отдельном хостинге, что бы в случае проблем с хостингом не лег основной сайт.

Детальное ТЗ во вложении

Что мне необходимо и входит в пакет от исполнителя

  • Проработать нюансы реализации. Это примерное описание – я не профи в парсинге и полагаюсь на опыт исполнителя
  • Разработать систему и запустить ее на сервере
  • Инструкция по установке системы на новый сервер и необходимые требования к серверу и окружению
  • Помощь в выборе ВПС, ктр не будут блочить за это
  • Совет по прокси – где брать, сколько, как чекать, что прокси умерли (можно и в скрипт такую опцию добавить
  • Система предоставляется с открытым исходным кодом (без обфусикации и т.п.)
При ответе прошу обозначить

  • Срок?
  • Стоимость? Форматы оплаты
  • Срок гарантийной поддержки, если что пойдет не так
  • Что от меня потребуется?
3 года назад
ZavMax
Иван 
41 годРоссия
11 лет в сервисе
Был
2 года назад
  • Похожие заказы
  • Прикладываю подробности в вордовском документе для оценки й стоимости и сроков. Есть сайт на ВП, нужно с нескольких онланй магазинов сделат ьтак, чтобы в автоматическом режиме добавлялись фотографии и конечно же описания игр в каталог, если ...

    Прикладное ПОнет заявок
    Закрыт
    3 года назад
  • Есть задача по программе маттермост (мессенджер) Нужно в программу добавить код для микрофона. Вот сами исходники с которыми можно ознакомится. https:// github.com /mattermost/desktop https:// github.com /mattermost/mattermost-server Цена договорная! Оставьте ваш телеграм для связи. Рассмотрим все варианты, и все более детально обсудим в ...

    Прикладное ПОнет заявок
    Закрыт
    3 года назад
  • Нужно разработать расширение для Word и Мой Офис. Расширение должно обрабатывать текст документа посредством внешнего web-сервиса. Все механизмы обработки текста осуществляются во внешнем сервисе. Примерная схема работы: 1. Расширение берёт текст текущего документа (весь или ...

    Закрыт
    3 года назад
  • $50

    нужны проги которые будут рассылать сообщения в личку в Вк и Инста людям из определенных сообществ,программа должна менять юзеров каждые 20 сообещий. Обязательно так же,чтобы ссылка в рассылаемом тексте была кликабельна . В понедельник должно ...

    Прикладное ПОнет заявок
    Закрыт
    3 года назад
  • Имеется приложение для аренды строительной техники. Для него был написан парсер, который собирает сообщения из Whatsapp и Telegram, обрабатывает их, и отправляет в Firebase. У этого парсера есть проблема - он плохо разбирает адреса. Например ...

    Закрыт
    3 года назад
  • $180

    Нужен инструмент, который парсит цены с Iherb по списку артикулов из ЛК Ozon, применяет к ценам указанные модификаторы (+% и +₽), и вносит их в ЛК Ozon. Подробное ТЗ: [url=https://docs.google.com/document/d/11t9FUxAJq0-gSyB3ipjon2LYa7Zx79cnLy08S-ojlyE/edit#]https://docs.google.com/document/d/11t9FUxAJq0-gSyB3ipjon2LYa7Zx79cnLy08S-ojlyE/edit#[/url]

    Закрыт
    3 года назад
  • Нужно разработать макрос для анализа нерабочих переходов по гиперссылкам.  Пример.  есть документ Exсel или PDF в документе 300 страниц , все страницы между собой связанны кнопками перехода(гиперссылками) . В связи с частой редакцией файла ссылки слетают (Удаление ...

    Прикладное ПО1 исполнитель
    Завершен
    3 года назад