LinkedIn не хочет отдавать данные? 3 способа заставить
Пару дней назад ко мне обратилась Юля с типичной болью:
Знакомо? LinkedIn действительно агрессивно блокирует автоматические запросы. Но решения есть.
🔧 Способ 1: Навык scrape.do + Claude Cowork
Самый элегантный вариант. У меня есть готовый навык для Claude, который использует API scrape.do — сервис с 99.98% успешностью запросов даже на защищённых сайтах.
Лучше запускать парсинг через Cowork. Главное преимущество — Cowork умеет параллелить задачи. Пока обычный Claude обрабатывает ссылки по одной, Cowork запускает 5 субагентов одновременно.
Проблема: бесплатный тариф даёт 1000 токенов API. Обычные сайты стоят 1 токен, но LinkedIn — 30 токенов за запрос. То есть бесплатно можно обработать ~33 страницы.
🤖 Способ 2: ChatGPT с фиксированным инструментом
Если хотите использовать ChatGPT, нужно заставить его использовать конкретный инструмент, а не пытаться скрапить самому.
Промпт:
Надо запускать web.run по каждой из ссылок:
curl --location --request GET 'https://api.scrape.do/?token=YOUR_TOKEN&url=LINKEDIN_URL'
[список ссылок]
Результаты обработай по промпту:
[описание структуры данных]
Минус: работает медленно — около 6 минут на 5 ссылок. Человек справился бы быстрее.
🆓 Способ 3: Gemini CLI — бесплатно и сердито
Самый хакерский вариант. Запускаем Claude Code, в нём — армию субагентов на Gemini:
привет, надо запустить субагентов, которые смогут
распаковать контент страниц из файла @links.md
и обработают их по логике @prompt.md
результаты сохрани в csv с заголовками,
агенты будут туда записывать строчки.
нужен lock файл, чтобы агенты ждали 1-2 сек,
если файл занят.
для парсинга используй команду:
gemini --model "gemini-2.5-flash" --yolo \
Извлеки данные о вакансии: [URL] по структуре [СТРУКТУРА]"
лимит попыток для каждого субагента — 5
Результат: 33 ссылки за 10 минут. Полностью бесплатно.
📊 Сравнение способов
🔸 scrape.do + Cowork — быстрее всего, 33 страницы бесплатно, дальше нужен платный тариф, дороже $29/мес
🔸 ChatGPT + scrape.do — работает, но медленно, требует API-ключ
🔸 Gemini CLI — бесплатно без ограничений, но нужен Claude Code и базовое понимание терминала
Есть ещё Apify с готовыми акторами для LinkedIn, но это уже для тех, кто готов разбираться в API.
Юля осталась довольна. LinkedIn — нет. Но кого это волнует.
----
Поляков считает — AI, код и кейсы
Пару дней назад ко мне обратилась Юля с типичной болью:
Прошу ChatGPT собрать в таблицу инфу с 20 ссылок на вакансии LinkedIn. Для 2-5 справляется, а потом говорит: "у меня нет доступа, линк защищён от скрапинга". Perplexity вообще отказался пробовать
Знакомо? LinkedIn действительно агрессивно блокирует автоматические запросы. Но решения есть.
🔧 Способ 1: Навык scrape.do + Claude Cowork
Самый элегантный вариант. У меня есть готовый навык для Claude, который использует API scrape.do — сервис с 99.98% успешностью запросов даже на защищённых сайтах.
Лучше запускать парсинг через Cowork. Главное преимущество — Cowork умеет параллелить задачи. Пока обычный Claude обрабатывает ссылки по одной, Cowork запускает 5 субагентов одновременно.
Проблема: бесплатный тариф даёт 1000 токенов API. Обычные сайты стоят 1 токен, но LinkedIn — 30 токенов за запрос. То есть бесплатно можно обработать ~33 страницы.
🤖 Способ 2: ChatGPT с фиксированным инструментом
Если хотите использовать ChatGPT, нужно заставить его использовать конкретный инструмент, а не пытаться скрапить самому.
Промпт:
Надо запускать web.run по каждой из ссылок:
curl --location --request GET 'https://api.scrape.do/?token=YOUR_TOKEN&url=LINKEDIN_URL'
[список ссылок]
Результаты обработай по промпту:
[описание структуры данных]
Минус: работает медленно — около 6 минут на 5 ссылок. Человек справился бы быстрее.
🆓 Способ 3: Gemini CLI — бесплатно и сердито
Самый хакерский вариант. Запускаем Claude Code, в нём — армию субагентов на Gemini:
привет, надо запустить субагентов, которые смогут
распаковать контент страниц из файла @links.md
и обработают их по логике @prompt.md
результаты сохрани в csv с заголовками,
агенты будут туда записывать строчки.
нужен lock файл, чтобы агенты ждали 1-2 сек,
если файл занят.
для парсинга используй команду:
gemini --model "gemini-2.5-flash" --yolo \
Извлеки данные о вакансии: [URL] по структуре [СТРУКТУРА]"
лимит попыток для каждого субагента — 5
Результат: 33 ссылки за 10 минут. Полностью бесплатно.
📊 Сравнение способов
🔸 scrape.do + Cowork — быстрее всего, 33 страницы бесплатно, дальше нужен платный тариф, дороже $29/мес
🔸 ChatGPT + scrape.do — работает, но медленно, требует API-ключ
🔸 Gemini CLI — бесплатно без ограничений, но нужен Claude Code и базовое понимание терминала
Есть ещё Apify с готовыми акторами для LinkedIn, но это уже для тех, кто готов разбираться в API.
📌 Для бизнес-объёмов однозначно scrape.do — у них инфраструктура под это заточена. Для разовых задач хватит Gemini CLI. Но прийдется платить за подписку. Ну или apify + разработчик.
Юля осталась довольна. LinkedIn — нет. Но кого это волнует.
----
Поляков считает — AI, код и кейсы