Грабер-+изменение контента
Грабер контента который будет запускаться на локальном компьютере, грабит определённый контент с ресурса(ресурсов) наполняьт базу(опять же на локальном компьютере)
а дополнительный скрипт парсил бы сграбленную базу и видоизменял её.
допустим:
item
атрибут 1: значение 1
атрибут 2: значение 2
атрибут 3: значение 3
работа скрипта автозамены атрибутов/значений атрибутов по заданным параметрам:
после того как граб сграбил контент и занёс его в базу№1 или xml, запускаеться скрипт(авто/мануал) по обработке и замене сграбленных данных(атрибут : значение)для каждого типа позиции и для каждого атрибута/значения, тоесть есть профил начальный мы создаем для него профиль конечный)
на выходе мы получаем базу с такими данными:
item
атрибут 1: значение 1 замена на: атрибут 1_m: значение 1_m
атрибут 2: значение 2 замена на: атрибут 2_m: значение 2_m
атрибут 3: значение 3 замена на: атрибут 3_m: значение 3_m
значения атрибутов, значений и те на которые они заменяються задаються в спец профиле для замены(для каждого типа -item)
после чего данные с уже модернизированной базы должны пересылаться(авто/манувл) на ресурс(базу данных)- в интернете) тоесть к ресурсу подключенному к БД на локальном компе.
нужно предусмотреть возможность самостоятельного задавания ресурса и доступа к базе куда будут пересылаться готовые данные.)
Возможно первоначальный граб не сразу в БД а в xml с которого уже будет проводиться напонение БД с изменённым контентов)
ЧТО грабим? :
картинка (3шт-маленькая, большая, очень большая), описание, подробное описание)
1)Скан и граб новых позиций
2)Многопоточность и прокси
3)Хранение файлов с именем - кодом товара-(источника граба)
Используется как индетефикатор в строках таблицы MySQl
4)Скрипт для изменения атрибутов/значения атрибутов по заданным параметрам для атрибутов и их значений
5)Возможность наполения ресурса в интернете (его БД)- с БД сграбленной(на локальном компе)
6)всё это с возможностью полного автомата и отдельного запуска=выборочно.
7)запуск граба и скрипта по изменению сграбленног- порасписанию- с локального компа
Структура необходимой БД будет предоставленна.