Добрый день.
Необходимо разработать парсер работающий по такому же принципу как гугл индексирует сайты, то есть много и быстро. Возможно не правильно выразился, но суть в следующем: Парсить нужно – много, быстро, постоянно, и в автоматическом режиме.
Далее, полученная инфа обрабатывается, фильтруется и сортируется по заданным критериям.
Критерии будут подробно описаны для исполнителя.
Затем обработанные объявления выдаются на наш сайт в виде интерактивного графика.
Всего будет два графика с разными задачами и показателями.
На каждом графике не более 30 позиций товара. Да, из огромного объма нам нужны выжимки.
Например Авито выдает почти 40 млн объявлений, но нам нужны не более 30 позиций.
Для оптимизации и ускорения парсинга, на каждое объявление нужно делать не более трех запросов, то есть по трем точкам – заголовок, цена и просмотры. Но при этом нужно предусмотреть возможность менять точки запроса, то есть должны быть ручные настройки фильтров самого парсера.
В настройках фильтров должна быть возможность выбора точек запроса в объявлении и обязательно категорий, например категория недвижки нам точно не нужна и нет смысла е парсить. А другие категории в зависимости от сезона.
Хранить спарсенную инфу нет необходимости, поэтому если и нужна будет БД, то только для временного хранения, на время оперативной обработки данных.
Обновление информации должно происходить не более чем каждые 3-5 часов, чем быстрее тем лучше.
Парсер будет располагаться на отдельном сервере, получать запросы, обрабатывать и отправлять нужные данные на сайт.
Это если коротко, все подробности будем обсуждать с исполнителем.
От Вас – Цена, сроки, вопросы.
С уважением Александр
Есть два сайта: [url=http://www.kemdetki.ru/]http://www.kemdetki.ru/[/url] [url=http://www.detkityumen.ru/]http://www.detkityumen.ru/[/url] Ищем исполнителя на ПОЛНУЮ адаптацию под мобильные устройства. Какова будет ваша стоимость адаптации: 1. Отдельно сайт Кемдетки 2. Кемдетки + Тюмень Сайт и все его сервисы написаны Django (Python). Работать нужно будет с репозиторием в Mercurial К ...
Добрый день Есть сайт http://dumrt.ru/ Он медленно открывается. Нужно его сделать быстрым. Подробное ТЗ прикрепил Постоплата рублями
Взломан сайт.Клиенты переправляются в другие салоны Нужен разработчик,знающий код сайта ЭлитПарик-это Вы.Нужен аудит сайта и защита
Параллакс, файл во вложении. Желательно сегодня. Пишите цену. На Joomla.
Был куплен скрипт для рассылки писем в коммерческих целях скрипт требует доработки Сделать поправки по скрипту: 1. Настроить скрипт, что бы был рабочий (протестировать) 2. Сделать так что бы отправленные письма не попадали в спам 3. Добавить платежный шлюз 4. ...
Нужно разработать модуль для CS Cart!! Задача следующая: Есть pdf файл. Его нужно отправлять клиенту при активации учетной записи! Как это должно получиться: После регистрации пользователя, администратор включает учетную запись или отклоняет. Так вот, нужно что бы при включении учетной ...
Здравствуйте! сайт не работает редактор, не сохраняет изменения в коде. Цмс опенкарт
Добрый день.Нужно внедрить амоСРМ на проект magnumoil.ru , основное это создавать сделки по всем обращениям на телефон и с сайта. Телефония уже подключена. Нужно все связать чтобы четко работало и карточка сделки открывалась по звонку. ...
Создание форума, с возможностью выкладывать записи администратором или пользователем, которому администратор таковое право даст. Также пользователи могут оставить заявку на добавление топика. Для комментирования топика нужно заплатить. Более подробно условия задания обсудим с исполнителем. В предложениях указывайте ...
http://bronextour.cz Оплата не до конца настроена. Вылазит ошибка на этапе чекаута http://joxi.ru/a2X3yn1S1BxL4m Privat key и public key есть. https://github.com/csob/paymentgateway - документация по подключению оплаты