Санкт-Петербург

Россия

Украина

Необходимо создать программу, посылающую запросы к ПС Яндекс и возвращающую ответ в виде html/xml (в зависимости от настроек) кода.
По сути это даже не полноценная программа, а ее каркас, содержащий функционал по работе с Яндексом.

Многопоточная программа, отправляет запрос вида:
http://yandex.ru/yandsearch?text=%D0%BF%D0%BB%D0%B0%D1%81%D1%82%D0%B8%D0%BA%D0%BE%D0%B2%D1%8B%D0%B5+%D0%BE%D0%BA%D0%BD%D0%B0&lr=2
Исходный код страницы с выдачей это и есть возвращаемый результат результат.

Программа должна иметь возможность работы в трёх режимах:

1) Работа через веб-интерфейс.

Вводим список запросов в поле, задаем количество потоков, жмем старт, выводим получаемые результаты. Для каждого потока указываем логин и пароль на Яндексе, т.к. для залогиненых юзеров он реже кидает капчу. Если Яндекс кинул капчу, то выводим её на форме и даём пользователю возможность её ввести, после чего продолжаем запросы. При появлении капчи для одного потока, остальные продолжают работать. Должна быть возможность указать время задержки между запросами одного потока.

2) Работа через Яндекс.XML (http://xml.yandex.ru/)

Вводим список запросов в поле, задаем количество потоков, жмем старт, выводим получаемые результаты. Для каждого потока указываем прокси и параметры user и key. Выводим в данном случае возвращаемый xml Должна быть возможность указать время задержки между запросами с одного прокси.

3) Работа через прокси

Вводим список запросов в поле, задаем количество потоков, жмем старт, выводим получаемые результаты. Вводим список проксей, тут не нужно логиниться. Если Яндекс кинет капчу, запрос передаем в обработку другому потоку, прокси схвативший капчу отправляем в режим бездействия на минуту (т.е. в течении минуты, он не участвует в работе). Если прокси возвращает "левую" страницу (например, не содержащую строк "Запросов за месяц:") или не отвечает по таймауту, удаляем его из списка, запрос передаем другому. Должна быть возможность указать время тайм-аута для прокси.


Программа должна быть разбита на классы, код хорошо прокомментирован. Должно без проблем компилироваться под VS 2010. Задавайте вопросы, если что-то не понятно.

Пишите цену и сроки выполнения.

Многопоточная программа, работа с Яндексом на C++

Положительные

США

Необходимо сделать, поставить и настроить тему под wordpress.
Предварительный вариант того, что мы хотим получить,  в прикрепленном файле.

Сделать тему под wordpress

Есть сайтик www.elegantthemes.com
Они продают шаблоны для вордпресс. Но заказчику нравится дизайн именно ихнего сайта. Если у кого есть такой шаблон, продайте. Если нет - сделайте.

Говорите цены и сроки.

Нужен шаблон для вордпресс

Парсер должен быть написан на php, порядок его работы:

1) Главная страница представляет из себя textarea, в которую пользователь заносит список доменов (каждый с новой строки), кнопку старт и поля с настройками (см. ниже).

2) После нажатия на кнопку, скрипт по очереди обрабатывает каждый домен: идет на страницу
http://wayback.archive.org/web/*/site.ru*
(где site.ru - один введенный домен), на ней есть все страницы, сохраненные в wayback.archive.org для этого домена.

3) Скрипт парсит все страницы, полученные из п.2. Если в вебархиве только один "снимок" страницы, то ссылку на нее мы получим сразу из п.2, если несколько, то из п.2 мы получим ссылку на календарь из которого мы должны взять последний снимок этой страницы.

Требуется обработка всех вариантов ответа сайта wayback.archive.org. Если сайт временно не доступен, работа должна прерываться, должно выводиться соответствующее предупреждение.

4) Каждая полученная страница обрабатывается библиотекой http://www.keyvan.net/2010/08/php-readability/ (она обрезает все меню, header, footer), там несложно.

5) После того, как скрипт получил все страницы и пропустил через php-readability, проводится дополнительная обработка:
- вырезаем все внешние ссылки (учитываем, что и внешние и внутренние ссылки на полученных страницах идут через редирект wayback.archive.org)
- исключаем все страницы, текста (без тегов) в которых меньше 500 символов (кол-во задается в настройках на главной)
- если получилось, что на нескольких страницах одинаковый текст, оставляем только одну, остальные исключаем
- внутренние ссылки на те страницы, что мы не исключили оставляем, все остальные - вырезаем (но сами урлы нужны будут позже в п.6).

6) Все страницы, которые не были исключены, мы сохраняем в папку site.ru/public_html (можно поменять в настройках на главной) под именами 1.html, 2.html и т.д. (главная сохраняется как index.html)

Если урл представляет из себя картинку, то она сохраняется в site.ru/public_html/images/ под именем 1.png, 2.jpg и т.д.

Файлы скриптов, стили, флеш сохранять не нужно.

При этом параллельно создается файл .htaccess в который добавляются инструкции, которые редиректят со старого адреса на новый. Например, мы скачали из архива страницу, оригинальный адрес которой был www.site.ru/index.php?param и сохранили ее под именем 1.html. В файле .htaccess в папке site.ru/public_html должна быть инструкция для редиректа с index.php?param на 1.html

Для урлов всех исключенных страниц, а так же урлов, полученных из внутренних ссылок в п.5, должен быть редирект на главную страницу.

Все оставленные в п.5 внутренние ссылки меняем с учетом новых имен (1.html и т.п.). Все теги изображений так же должны быть обработаны (у изображений новые имена), если изображения не было сохранено, то тег вырезается. Все пути должны быть относительными.

7) Сохраненные страницы сохраняются в обычный html документ с кодировкой utf-8. Кроме контента полученного из php-readability мы сохраняем так же оригинальный тег <title>. Внизу каждой страницы мы вставляем карту сайта, содержащую все сохраненные страницы (<a href="/index.html">/</a> <a href="/1.html">1</a> <a href="/2.html">2</a> и т.д.)

8) В итоге, для введенного в начале site.ru мы получим папку site.ru/public_html/

файлы страниц в ней 
site.ru/public_html/index.html
site.ru/public_html/1.html
site.ru/public_html/2.html 
и т.д.

файл с редиректами
site.ru/public_html/.htaccess

папку с картинками
site.ru/public_html/images/1.png
site.ru/public_html/images/2.png
и т.д.

В общем, отдельный сайт на html, сохраненный локально. После загрузки на хостинг должен работать.



Если есть вопросы/уточнения - спрашивайте не стесняйтесь. Оплата по факту, или частями по факту, или через сделку без риска WebMoney или Я.Деньги.

Выслушаю предложения по срокам и стоимости.

Парсер wayback.archive.org

HTML

Требуется написать скрипт и веб-интерфейс для результатов, который будет агрегировать новости и сюжеты сервиса Яндекс Новости (news.yandex.ru/), а так же обрабатывать их и представлять в удобном виде.

ТЗ в приложении. Жду предложений по срокам и стоимости.

Админка для журналистов для раб. с Яндекс.Новости

Требуется написать скрипт с веб-интерфейсом для агрегации новостей и обработки сюжетов в Яндекс Новостях (http://news.yandex.ru/). ТЗ в приложении.

Ждем предложений по срокам и стоимости.

Скрипт и интерфейс для агрегации Яндекс Новостей

Требуется написать скрипт на php собирающий и обрабатывающий данные об аукционах доменов на разных сайтах.

Алгоритм работы скрипта:

1) Программа скачивает несколько .csv файлов по указанным адресам:

http://auction.nic.ru/freeing/list.cgi
http://www.reg.ru/newdomain/rereg (после регистрации внизу будет кнопка "выгрузить список")
https://partner.r01.ru/AUCTION/
http://www.webnames.ru/auction/closing.pl?perpage=100
http://mastername.ru/freeing/
+ особняком стоит https://auctions.godaddy.com/trpHome.aspx (в "Predefined" выбираем опцию Expiring), csv я не нашел, надо либо парсить html, либо разбираться с их инструментами - https://auctions.godaddy.com/trpTools.aspx

2) Из файлов (или того, что отпарсила) получает и приводит к единому виду дату окончания аукциона, текущую стоимость, регистратора (сайт, с которого парсили), домен, затем определяет параметры домена (ТИЦ, склейку ЯК, дату освобождения по whois):

- Определяем ТИЦ и склейку: http://bar-navig.yandex.ru/u?ver=2&url=http://design.ru&show=1
ТИЦ это value для tcy, если имя домена отличается от url domain или yaca url (варианты с www и без считаются одинаковыми), то домен склеен.
- ЯК: из урла выше берем <textinfo>, если он пустой, сайт не в ЯК. Если не пустой, то ищем http://search.yaca.yandex.ru/yca/cy/ch/design.ru: если там есть, то это номальный ЯК, если есть только в bar-navig, то это "скрытый ЯК".
- Дата освобождения - любой whois.

3) Представляет все данные, подходящие под заданные условия ( ( "ТИЦ">0 или "ЯК" или "скрытый ЯК" ) И "не склеен" И "Освобождается не позже, чем через неделю"), в удобном виде на странице. (прим: скрытый ЯК подходит, но визуально должен отличаться от обычного ЯК). Домены не подходящие под эти условия можно удалять сразу.

Для каждого регистратора создается своя таблица, домены в ней сортируются сначала по не пустому ЯК, затем по дате освобождения (освобождается скоро - в таблице раньше), затем по ТИЦ (от большего к меньшему)


Требования к работе скрипта:

- Активация скрипта (сбор доменов и данных) должна быть при обращении к скрипту так, чтобы можно было дергать его по крону (запускать буду локально). Отображение результатов, соответственно, на отдельной странице. 
- Старые данные (т.е. данные о доменах аукцион для которых завершился) должны удаляться из базы
- Все настройки (адреса .csv файлов, регулярки для получения параметров, условия отображения доменов) должны находиться в одном месте в начале кода, чтобы их можно было легко и быстро отредактировать
- Таблицы с данными должны быть красиво оформлены (отмечу: в ЯК отображается содержимое <textinfo>, скрытый и не скрытый ЯК визуально отличаются). Можно сделать все просто, но аккуратно.
- Код должен быть красивым и структурированным
- Код должен быть подробно прокомментирован

Еще:

Если есть вопросы по работе программы - задавайте.
Выслушаю предложения по срокам и стоимости.
Оплата - по факту или безопасная сделка.

Cкрипт php, собирающий данные об аукционах доменов

Здравствуйте! Требуется срочный копирайтинг для двух сайтов (продажа коттеджей и участков/строительство коттеджей). В сумме около 25k символов (может, немного больше). Оплата 4$/1000 симв. Заказ необходимо выполнить до завтра, до 11 утра по мск. времени. ТЗ для текстов выбранному исполнителю скину в районе 20 вечера, поэтому, если интересует получение этой работы, пишите icq или skype и будьте в это время на связи.

Оплата по факту, завтра утром (Я.Деньги) или вечером (если нужны WebMoney), после проверки текстов.

Михаил Gerasimov-M-N