Просадка сайта. пытаюсь разобраться в причине. подскажете?)

эта штука давно стоит.
Но там хз как бота вычислить, если он не явный и не подпадает под критерии. Тогда сам скрипт его показывает

 

Такое впечатление, что боты дальше продолжают атаковать сайт.
Может, через Cloudflare можно как-то фильтровать эту пакость?

 

справа в клаудфларе

Код:

Quick Actions
Under Attack Mode
Show visitors a JavaScript challenge when they visit your site.

поставь его. будет капча выводиться. не все боты её проходят.

 

Under Attack это прям жесткая фильтрация. Я хз или стоит её ставить

 

на скриптерс есть php скрипт Антибот, там простенькая каптча на вход по цвету, поставь попробуй мне помогло от таких прямых заходов

 

ПС ботов и нормальных ботов должно пропускать.
Остальных - по списку выше писал - можно блочить если они проходят клаудфлар.

 

В гугле веб-мастере самая точная инфа по DMCA. Еще должны письма на почту от гугла приходить где сказано что вычистили с выдачи по DMCA...

 

Индификатов вроде в письме которое пришло от ДМЦА тебе на почту. Посмотри, точно не помню.
Если честно, самому интересно, как востанавливать страницы в гугле удаленные по ДМЦА. Не разу не делал.

 

ЛОкальная версия мало что блокирует. Всех пропускает.

 

В вебмастере у меня пусто. А вот писем много было. По всем прошёлся. На всё отправил встречное уведомление.

Нет, в письме не было в моём случае. Я просто кликнул там на какую-то ссылку (в окне, где просят идентификатор ввести) и там еще одна ссылка типа "без идентификатора", которая ведёт на нужную нам всем форму.

Попробуй. Это весело

 

Явно какая-то фигня. Это даже не нагул. Это что-то прицельное. Чтобы отказы поднять.
И такая разница между Liveinternet и Метрикой. В 3 раза


*Включил Bot fight mode на CloudFlare. Посмотрим, как будет утром.

 

Посмотри в WAF CloudFlare с какой страны прут боты, поставь для них капчу через WAF правило. CloudFlare плох тем, что из-за него РКН блокирует ру трафф. У тебя же сервер у Инферно, насколько я вижу, попроси саппорт помочь в блокировке ботов. Они глянут откуда прут боты и настроят фильтры на сервере. Плюс у Инферно есть спец. сервера, которые неплохо отражают DDOS атаки. Можешь попробовать на такой переехать и попросить саппорт его грамотно настроить.

 

Через CloudFlare удалось выяснить, что боты валят из Сингапура и Ирландии. И еще немного из США. Сингапур нафиг заблокировал там же в CF. По США еще подумаю, что делать.
А по Метрике мало что изменилось.

+подключил облачную проверку на Антибот. Посмотрим, что он выловит.

 

Выяснил. Из Сингапура лезет вот этот бот - PetalBot;+Webmaster certification site)
Но есть и "неофициальные" так сказать боты. Хз что это за зараза и откуда.
Японию блокнул тоже.

 

Боты могут переть, после перестать, как в моем случае было. Если не перестают, можно капчу врубить при заходе. Если скручивают ПФ или боты лезут на 1 страницу, можешь капчу врубить именно на ту страницу.

 

С обеда Антибот заблокировал 2000 ботов. 90% шли с двух IP - Германия, США. Я их в Cloudflare дополнительно в блок кинул. Прямые заходы резко упали.
Природу этих ботов выяснить пока не удалось. Сегодня ночью буду разбираться.

Кстати, ты спрашивал про DMCA. Пришли мне сегодня письма, что через 10 дней мне восстановят ссылки. 15 штук восстановили сразу.
+ заказал первые пару пачек описаний. Уже размещаю потихоньку. Всё новинки 2025 года.

 

ДОПОЛНЕНИЕ

Германия - discovery-crawler10.blex.seranking.com
США - DotBot/1.2; +Free Backlink Checker - Moz Link Explorer - Moz [email protected]

Вместе 1400 запросов за сегодня с обеда. Пздц они творят дела )

 

Я тут подумал. Если эти боты прям маркируют себя, то наверное и ПС не особо реагируют на статистику, которую делают эти боты.

 

Budda вот всех таких ботов можно блокировать. к сожалению нет нормальной статистики, гугл не видит запросы от яндекса, яндекс не видит запросы от гугла. Раньше можно было видеть все запросы в любой статистике, сейчас всё шифруют. Нужно иметь свою метриуку, но не нашёл пока ничего, раньше piwik была норм, но она запросы тоже уже давно не показывает.

 

Ты буд-то читаешь и видишь что-то своё))) как и в соседней теме про IPv6. Я тут говорю о том, что боты идентифицируют себя часто. Это значит, что Гугл и Яндекс понимают, что это боты. И возможно, не будут обращать внимание на их поведение на сайте.