Доминика

LinkedIn Domain Checker через Google + AdsPower---Цель:Создать чекер, который:1. Ищет компании на LinkedIn по доменам — через Google (а не встроенный поиск LinkedIn)2. Переходит на страницу компании3. Проверяет:- Совпадение домена- Наличие верификации (Verified Page и дата)---Язык:- Node.js (с puppeteer) или Python (с playwright-async)- Обязательно: WebSocket-интеграция с AdsPower- Работа в несколько потоков через AdsPower-профили---Вход:- <code>domains.txt</code> — список доменов (по одному на строку)- <code>config.json</code>:```json{"adspower_api": " <a href="http://local.adspower.net:50325">http://local.adspower.net:50325</a>","profiles": ["k109syyt", "k10abc", "k10xyz"],"domains_per_profile": 400,"delay_range_sec": [1.5, 3.5],"output_csv": "results.csv",}```---Как работает:1. Загружаем список доменов и распределяем на AdsPower-профили (до 400 на каждый).2. Для каждого домена:- Выполняем Google-запрос:```site:linkedin.com/company "<a href="http://example.com">example.com</a>"```или```<a href="http://example.com">example.com</a> linkedin```- Ищем ссылку на профиль компании (вида <a href="https://www.linkedin.com/company/…`">https://www.linkedin.com/company/…`</a>)- Если найдено — переходим на LinkedIn-страницу этой компании- Далее парсим:---Проверка профиля:1. Ищем блок Website извлекаем ссылку2. Сравниваем с оригинальным доменом (нормализуем оба):- удаляем <code>http://</code>, <code>https://</code>, <code>www.</code>- отсекаем всё после <code>/</code>- игнорируем регистрСовпадение засчитывается, если базовый домен совпадает3. Проверяем наличие блока <code>Verified page</code> и дату, если есть4. Пишем результат---Вывод:- <code>domain</code>, <code>company_name</code>, <code>company_url</code>, <code>verified (yes/no)</code>, <code>website_match (yes/no)</code>, <code>verified_date</code>, <code>used_profile</code>- CSV---Важно:- Можно использовать либо обычный Google-поиск через Selenium, либо SERP API (опционально)- При использовании SERP API — добавьте ключ <code>serpapi_key</code> в <code>config.json</code>- Если ключ не указан, используется поиск через Selenium (ручной)- Работа через AdsPower с DevTools WS- Не больше 3–5 активных потоков одновременно (1 профиль = 1 поток)- Делать задержки между действиями (random sleep + прокрутка)- В случае ошибок — логировать, не падать- Продолжать выполнение при обрывах и timeouts---Зависимости:- Python: <code>playwright</code>, <code>websocket-client</code>, <code>requests</code>, <code>beautifulsoup4</code>- Node.js: <code>puppeteer-core</code>, <code>ws</code>, <code>axios</code>, <code>cheerio</code> и т.д.---Пример профилей:- AdsPower API: <a href="http://local.adspower.net:50325`">http://local.adspower.net:50325`</a>- Профили: <code>k109syyt</code>, <code>k10abc</code>, <code>k10xyz</code>, ...---Приложены примеры страниц:- Пример верифицированной страницы (галочка + дата)- Пример совпадения домена в разделе Website- Пример успешного поиска через Google вместо LinkedIn---config.json:```json{"adspower_api": " <a href="http://local.adspower.net:50325">http://local.adspower.net:50325</a>","profiles": ["k109syyt", "k10abc", "k10xyz"],"domains_per_profile": 400,"delay_range_sec": [1.5, 3.5],"output_csv": "results.csv","serpapi_key": "57eb0fe7747026db13b412c3718f37793c63706b9f816efdfcb7ff7c0d00d151" // &lt;--- опционально}```Если поле <code>serpapi_key</code> отсутствует или пустое — используется поиск через обычный Google вручную.!!ТЗ было написано с помощью чатбота, могут быть неточности, но вроде все проверил, должно быть все правильно. Если будут вопросы - уточняйте.

LinkedIn Domain Checker через Google + AdsPower---Цель:Создать чекер, который:1. Ищет компании на LinkedIn по доменам — через Google (а не встроенный поиск LinkedIn)2. Переходит на страницу компании3. Проверяет:- Совпадение домена- Наличие верификации (Verified Page и дата)---Язык:- Node.js (с puppeteer) или Python (с playwright-async)- Обязательно: WebSocket-интеграция с AdsPower- Работа в несколько потоков через AdsPower-профили---Вход:- <code>domains.txt</code> — список доменов (по одному на строку)- <code>config.json</code>:```json{"adspower_api": " <a href="http://local.adspower.net:50325" rel="nofollow noopener noreferrer" target="_blank">http://local.adspower.net:50325</a>","profiles": ["k109syyt", "k10abc", "k10xyz"],"domains_per_profile": 400,"delay_range_sec": [1.5, 3.5],"output_csv": "results.csv",}```---Как работает:1. Загружаем список доменов и распределяем на AdsPower-профили (до 400 на каждый).2. Для каждого домена:- Выполняем Google-запрос:```site:linkedin.com/company "<a href="http://example.com" rel="nofollow noopener noreferrer" target="_blank">example.com</a>"```или```<a href="http://example.com" rel="nofollow noopener noreferrer" target="_blank">example.com</a> linkedin```- Ищем ссылку на профиль компании (вида <a href="https://www.linkedin.com/company/…`" rel="nofollow noopener noreferrer" target="_blank">https://www.linkedin.com/company/…`</a>)- Если найдено — переходим на LinkedIn-страницу этой компании- Далее парсим:---Проверка профиля:1. Ищем блок Website извлекаем ссылку2. Сравниваем с оригинальным доменом (нормализуем оба):- удаляем <code>http://</code>, <code>https://</code>, <code>www.</code>- отсекаем всё после <code>/</code>- игнорируем регистрСовпадение засчитывается, если базовый домен совпадает3. Проверяем наличие блока <code>Verified page</code> и дату, если есть4. Пишем результат---Вывод:- <code>domain</code>, <code>company_name</code>, <code>company_url</code>, <code>verified (yes/no)</code>, <code>website_match (yes/no)</code>, <code>verified_date</code>, <code>used_profile</code>- CSV---Важно:- Можно использовать либо обычный Google-поиск через Selenium, либо SERP API (опционально)- При использовании SERP API — добавьте ключ <code>serpapi_key</code> в <code>config.json</code>- Если ключ не указан, используется поиск через Selenium (ручной)- Работа через AdsPower с DevTools WS- Не больше 3–5 активных потоков одновременно (1 профиль = 1 поток)- Делать задержки между действиями (random sleep + прокрутка)- В случае ошибок — логировать, не падать- Продолжать выполнение при обрывах и timeouts---Зависимости:- Python: <code>playwright</code>, <code>websocket-client</code>, <code>requests</code>, <code>beautifulsoup4</code>- Node.js: <code>puppeteer-core</code>, <code>ws</code>, <code>axios</code>, <code>cheerio</code> и т.д.---Пример профилей:- AdsPower API: http://local.adspower.net:50325`- Профили: <code>k109syyt</code>, <code>k10abc</code>, <code>k10xyz</code>, ...---Приложены примеры страниц:- Пример верифицированной страницы (галочка + дата)- Пример совпадения домена в разделе Website- Пример успешного поиска через Google вместо LinkedIn---config.json:```json{"adspower_api": " <a href="http://local.adspower.net:50325" rel="nofollow noopener noreferrer" target="_blank">http://local.adspower.net:50325</a>","profiles": ["k109syyt", "k10abc", "k10xyz"],"domains_per_profile": 400,"delay_range_sec": [1.5, 3.5],"output_csv": "results.csv","serpapi_key": "57eb0fe7747026db13b412c3718f37793c63706b9f816efdfcb7ff7c0d00d151" // &lt;--- опционально}```Если поле <code>serpapi_key</code> отсутствует или пустое — используется поиск через обычный Google вручную.!!ТЗ было написано с помощью чатбота, могут быть неточности, но вроде все проверил, должно быть все правильно. Если будут вопросы - уточняйте.

Андрей guest_1749782197826

Чекер LinkedIn