Странный массовывй трафик в яндекс. метрике
Здравствуйте. Уже сломал голову себе и техподдержке ЯМ, но так и не нашел причину. Возможно, кто-то сталкивался.
Итак, вводная: где-то до ноября примерный трафик в Яндекс. Метрике и LiveInternet был более менее был похож.И это длилось годами. Отличался на 10-30 процентов, но в целом — все нормально. Время на сайте в ЯМ — больше минуты стабильно, глубина хорошая,
А вот с конца ноября — началось резкое наращивание странного трафика. Скажем, если в LI — всего 4 тысячи вместе с Google, то в ЯМ — все 8 000 пользователей, например.
Но это бы ладно, но начался резкий спад поведенческих — время на сайте упало до 20-30 секунд, глубина просмотра тоже в ауте за счет появления этого массового непонятного трафика. При этом никаких кардинальных работ не велось ни по дизайну, ни по юзабилити и т.п. Сайт остался прежним, поведенческие там стабильные были годами, ни с того ни с сего в 3 раза целый месяц им попросту не от чего валиться.
Поддержка ЯМ посоветовала настроить максимально жесткие права для роботов, но это ничего не меняет, Дурной трафик продолжает идти. При этом если раньше большинство приходило из ПС, а доля прямых заходов была всего 10-20 процентов, то сейчас до 70%. Причем идут массово со смартфонов. Я мыслю трезво и знаю, что у нас столько нет «верных» посетителей, которые бы напрямую в новогодние праздники (да и вообще) намеренно к нам ходили напрямую.
why there special state this IP block `NON-RIPE-NCC-MANAGED-ADDRESS-BLOCK`?
What’s the RIPE NCC ‘s function? why there special state this IP block 47.0.0.0 — 49.11.255.255 is NON-RIPE-NCC-MANAGED-ADDRESS-BLOCK , what’s the significance of this?
EDIT
I know under IANA there are four Regional Internet Registries: RIPE NCC , APNIC , ARIN and LACNIC .
but why there it only special NON-RIPE-NCC-MANAGED-ADDRESS-BLOCK ? I use other whois tool query it shows 49.11.255.255 is under APNIC .
why it not special NON-ARIN-MANAGED-ADDRESS-BLOCK or NON-LACNIC-MANAGED-ADDRESS-BLOCK ?
2 Answers 2
IP address assignment to organizations is distributed across several Regional Internet Registries (RIRs) which oversee their own regions, such as RIPE (Europe) or ARIN (North America). They don’t assign addresses out of a single shared pool – instead each RIR gets its own allocation from IANA and only assigns addresses out of that pool.
Each RIR has its own WHOIS server, and your client needs to somehow know which WHOIS server it’s supposed to ask for whatever IP address. That is, you cannot always query whois.ripe.net and expect it to work every time. Some clients have the top-level RIR assignments and corresponding WHOIS servers hardcoded in the source code – and that list, of course, can get out-of-date.
However, often the WHOIS databases have ‘stub’ entries for foreign addresses, so instead of simply returning «No results» the server actually returns an entry that says «It’s not my responsibility to know about it». Sometimes this is because the database schema requires all addresses to have a ‘parent’, e.g. if your address was obtained from ARIN but you want to announce it in RIPE’s region and have to enter it into RIPE’s database somehow.
So there’s nothing special about this block, other than your WHOIS client is asking the wrong server about it (possibly because the client is more than a few years old).
" IPv4 address block not managed by the RIPE NCC " — что за зверь?
Не так давно стал замечать в Вебвизоре Яндекс метрики любопытную запись в графе " IP- сеть " — " IPv4 address block not managed by the RIPE NCC ". С начала не придал большого значения, просто проверил ПФ (поведенческие факторы) посещения — вполне осознанное, человеческое. Потом доля таких записей начала весомо расти и, конечно вызвало интерес к теме — откуда такой зверь взялся? Полазил по просторам интернета в поиске похожих вопросов и обнаружил, что эта ситуация будоражит многие светлые и не очень умы от Веб-мастеров до СЕО-шинков. Но от количества различных мнений и домыслов, гипотез, бреда сивой кобылы и просто фантазий голова пошла кругом.
Кто-то вещал о неуловимых Американских хакерах, разрушающих наш интернет. Кто то, как- принято, винил конкурентов, что те пробивают под себя ключевые фразы. Были идеи, что началось повальное воровство контента и злые парсеры перекачивают себе драгоценный опыт, которым мы делимся на страницах наших сайтов. Тут же писались рекомендации как отключать пронырливых ботов и закреплять авторство за контентом. Не обошли стороной и наш Роскомнадзор — это его блокировки, и мы все под колпаком ФСБ. Короче, полный бардак и ничего конкретного. Лишь единичные всплески сознания давали ухватить мысль, что причина не в беспределе окружения, а в чем-то простом, связанном с IP распределением адресов.
Может мне повезло с тем, что посещение мной своего сайта как раз отдаёт такой заголовок IP-сети, и версии с хакерами, ворами, злостными кликастыми Ботами отлетели сами собой.
Решил я озадачить этим вопросам WritingMate.AI (ChatGPT и GPT-4 ассистент). Задал такой вопрос:
Почему в Яндекс метрике в графе IP — сеть проставляется запись "IPv4 address block not managed by the RIPE NCC". С чем это связано, так как даже собственные посещения сайта вызывают периодически эту запись.
Ответ AI меня полностью устроил. Читайте:
Запись " IPv4 address block not managed by the RIPE NCC " в графе IP-сеть в Яндекс Метрике означает, что IP-адрес, с которого был сделан запрос на сервер, не относится к блоку IPv4-адресов, управляемых РИПН (RIPE NCC). RIPE NCC — это организация, которая управляет выделением IP-адресов и автономных систем в регионе Европа, Ближний Восток и некоторых других странах. Что касается вашего вопроса о том, почему вы видите эту запись даже для своих собственных посещений сайта, возможно, это связано с тем, что ваш интернет-провайдер использует блок IP -адресов, который не управляется РИПН . Также возможно, что при использовании VPN-сервисов или прокси-серверов вы будете видеть эту же запись в графе IP-сеть.
Как видите ничего страшного для SEO продвижения не наблюдается. Для меня лично на этом вопрос закрыт. 
Непонятные заходы на сайт из США
В метрике почти каждый день вижу заход из США — 0 секунд проводит всегда на сайте, и портит статистику по отказам. Заходит под разными браузерами и системами. Как с этим бороться?
В метрике нашел о нем такую инфо:
IPv4 address block not managed by the RIPE NCC
По вашему запросу довольно много обсуждений гуглится, в т.ч. есть обсуждения на серче, форуме касперского и т.д. Однако однозначного ответа нет. Подобную картину иногда наблюдал на сайтах, списывал на работу парсеров или пинг-сервисов. Как вариант — забанить их ip.
Возможно кто-то пользуется сервисом подмены ip адреса, и не хочет чтобы вы видели его реальный адрес
Узнал его ip 138.197.2.115
Диапазон: 138.196.0.0 — 138.197.255.255
Можно ли его банить? Это не поисковики?
Жерносенко Виталий:
Узнал его ip 138.197.2.115
Диапазон: 138.196.0.0 — 138.197.255.255
Можно ли его банить? Это не поисковики?
OrgName: Microsoft Corporation
Майкрософт давно сдает свои сервера в субаренду, да и вообще из США идет 90% мусорного бототрафика на наши сайты, я давно их фильтрую.
Dram:
OrgName: Microsoft Corporation
Майкрософт давно сдает свои сервера в субаренду, да и вообще из США идет 90% мусорного бототрафика на наши сайты, я давно их фильтрую.
Спасибо, теперь буду искать как это делается
А подскажите еще, как вообще физически это происходит, допустим я заблокировал по ip не бота программу, а живого человека, и вот он решил зайти на мой сайт, что он вообше увидит на своем экране? Что ему напишут, ни разу не встречался с таким.
Да ничего ему не покажет. Я когда по IP блокирую, пишу пользователю текст, мол ваш IP заблокирован. Если вы хотите открыть сайт напишите на почту.
Сша и канаду я на одном из сайтов вообще по гео заблокировал (определяю с помощью SxGeo IP адреса в логах, которые сохраняется в mysql). Фильтрую лишь GoogleBot, BingBot. Все остальное не нужно.
Все равно не понял, вот он нажал на ссылку чтобы перейти на сайт, что происходит — всплывает окно браузера с какой-то надписью? Он вообще понимает что он заблокирован, или думает что у него глюк какой-то? Я то не знаю где прописать ему сообщение.