Нужно создать Веб приложение парсер на Python.
После перехода на адрес, например www.my-parser8674.com мы авторизируемся иможем начинать управлять профилями парсера.
Начальная область работы - это список профилей всех парсеров. Можно создатьновый профиль, удалить профиль, редактировать профиль, запустить сбор данных.
При редактировании профиля нам отображается карточка выбранного профиля,лог всех прошедших ранее операций и результаты сбора данных в выбранном профиле.
В карточке профиля у нас есть возможность настроить условия сбора данных, аименно:
пример алгоритма создания профиля:
оператор указывает адрес, который его интересует, подтверждает и в этом жеокне открывается встроенный в парсер браузер с анализатором всех DOM узлов
страницы. Браузер визуально должен отображать 1-в-1 то, что отображается в
обычном браузере. Дальше клиент добавляет новую сущность в справочник профиля:
например, создает свойство с кодом "Price", название
"Цена", в браузере визуально кликает на цене, ему отображаются доп
настройки парсинга этого поля - тип (число, текст, html, картинка, ссылка,
массив), удалять слова (возможно удалять перечень слов), условия (если равно/не
равно/содержит/не содержит тогда ставить какое-то свое значение, например
"-1"). Для примера рассмотрим еще такой тип как "массив".
После выбора данного типа у нас появляется два доп. поля настройки элементов:
название и значение - для них мы аналогично мышкой в браузере указываем все
точно так же. В результате, основная настройка будет читать таблицу или список
как массив, а доп настройки будут разбивать ее на массив с набором нужных
значений.
ПОДРОБНЕЕ В ФАЙЛЕ
Добрый день! Необходимо спарсить фото товара - часы из соц. сетей в соответствии с названием и фото товара указанными в таблице (лучше ориентироваться по фото, ибо название не точное) . Инстаграм , Одноклассники, Фейсбук, Вконтакте. Можно ...
Решить пункт 2 и 3 в 12 задаче
Всем привет! мне нужно создать программу или сайт. есть инструкция как все сделать, но на испанском и английском. смысл в том что в Испании есть запись к врачам, на прописку и тд. Для этого надо получать ситу. А ...
Нужно написать расширение для inkscape на языке python, которое бы рисовала фрактальное дерево по заданным пользователем характеристикам: начальная толщина веток, цвет веток, глубина рекурсии, цвет концов веток, начальная длина ветки. Срок задания - до 24 ...
[i]Моделирование работы морского порта[/i] Требуется создать компьютерную модель обслуживания потока [i]заявок на разгрузку[/i], поступающих от [i]грузовых судов [/i](сухогрузов и танкеров), прибывающих в морской порт. Грузовые суда прибывают в порт согласно [i]расписанию[/i], но возможны опоздания и досрочные прибытия. Расписание включает день ...
Необходимо написать голосового бота, который бы осуществлял звонки и отвечал по скрипту (скрипт из 5-и диалогов, примерно на 3000 символов текста). Для распознавания голоса можно использовать DeepSeech под русский язык: [url=https://github.com/GeorgeFedoseev/DeepSpeech]https://github.com/GeorgeFedoseev/DeepSpeech[/url] Для ответов – Tacotron 2 или mozilla/TTS. Пример тренировки ...
Нужно создать скрипт для работы с Facebook. Возможности скрипта: 1.1 Рандомизатор user agent на основе уже существующих user agent (Iphone IOS) через регулярные выражения для эмуляции работы . 1.2 Работа с сервисами приема смс через API для регистрации ...
Есть частично созданная система для внутреннего использования. Служит для контроля за работой автопарка на Laravel Так как система не имеет законченной формы, а ее функционирование дорабатывается исходя из новых видений и целей, возникает потребность в периодической ...
Необходимо перенести программу из Matlab на Python
Необходимо написать голосового бота, который бы осуществлял звонки и отвечал по скрипту(скрипт из 5-и диалогов, примерно на 3000 символов текста).Для распознавания голоса можно использовать DeepSeech под русский язык: https://github.com/GeorgeFedoseev/DeepSpeechДля ответов - Tacotron 2 или mozilla/TTS.Пример ...