На днях наткнулся на YouTube на действительно крутой с технической части видос о том как работает РКН и как именно они банят сайты и «Сервисы Восстановления Работоспособности Интернета». Если вчитываться в инфографику на экране - можно за 30 минут понять всю их техничку.
Крутой видос с точки зрения развития эрудиции, для инженеров особенно. Для SEO-спецов втройне - доступен по ссылке 👉 https://www.youtube.com/watch?v=AITLxck-5TE
Что мы можем вынести полезного себе из этого видоса?
Я думаю те, кто работает в High-risk тематиках находили сайты или даже целые сетки, клоакинг (подмену контента) которых невозможно пробить ни чем - даже Gemini и другими сервисами Google. Видос выше проливает свет на этот нюанс для тех кто еще не знает как эти ребятки это делают. Давайте разбираться.
Что такое JA3 Fingerprint:
Когда устанавливается HTTPS соединение (происходит ClietnHello), клиент посылает набор данных: версию TLS, наборы шифров (Cipher Suites), доступные расширения и эллиптические кривые (это нужно для шифрования).
И что тут интересно:
👉 Google Chrome имеет один работ этих параметров
👉 Python скрипты - совершенно другой
👉 Node.js библиотеки - третий (очень палевный кстати!)
👉 Реальный Google Bot - четвертый (уникальный, там они используют свою штуку - BoringSSl)
Если что - здесь всякие детские парсеры типа Screaming Frog тоже отлетают на раз - их сразу видно.
Так вот - если вы не можете посмотреть что за клоакингом конкурента - скорее всего они используют JA3 Fingerprinting.
Вопрос: что мешает вам это использовать? Просто попросите Claude помочь вам «защититься от разведки конкурентов» - ну вы поняли 😁
А еще некоторые ребята в кулуарах сообщают, что если используешь JA3 фингерпринты и отдаешь конкурентам и левым ботам ответ 403, а не какой-то левый «белый» контент - сайты живут на 4-6 месяцев(!) дольше.
Думайте 😉
Крутой видос с точки зрения развития эрудиции, для инженеров особенно. Для SEO-спецов втройне - доступен по ссылке 👉 https://www.youtube.com/watch?v=AITLxck-5TE
Что мы можем вынести полезного себе из этого видоса?
Я думаю те, кто работает в High-risk тематиках находили сайты или даже целые сетки, клоакинг (подмену контента) которых невозможно пробить ни чем - даже Gemini и другими сервисами Google. Видос выше проливает свет на этот нюанс для тех кто еще не знает как эти ребятки это делают. Давайте разбираться.
Что такое JA3 Fingerprint:
Когда устанавливается HTTPS соединение (происходит ClietnHello), клиент посылает набор данных: версию TLS, наборы шифров (Cipher Suites), доступные расширения и эллиптические кривые (это нужно для шифрования).
И что тут интересно:
👉 Google Chrome имеет один работ этих параметров
👉 Python скрипты - совершенно другой
👉 Node.js библиотеки - третий (очень палевный кстати!)
👉 Реальный Google Bot - четвертый (уникальный, там они используют свою штуку - BoringSSl)
Если что - здесь всякие детские парсеры типа Screaming Frog тоже отлетают на раз - их сразу видно.
Так вот - если вы не можете посмотреть что за клоакингом конкурента - скорее всего они используют JA3 Fingerprinting.
Вопрос: что мешает вам это использовать? Просто попросите Claude помочь вам «защититься от разведки конкурентов» - ну вы поняли 😁
А еще некоторые ребята в кулуарах сообщают, что если используешь JA3 фингерпринты и отдаешь конкурентам и левым ботам ответ 403, а не какой-то левый «белый» контент - сайты живут на 4-6 месяцев(!) дольше.
Думайте 😉