Важно Блокировка по ip всяких антипираток, вебконтролей, рупротектов и прочей мерзости.

Ребят, срочно нужна помощь, подскажите дельный совет.
Я смотрел запросы страниц по логам апача, находил подсети (как правила вида 185.158.101.1/22, 191.101.76.1/22 и т.д., все как правило принадлежат
Digital Energy Technologies Ltd), все равно прилетает DMCA от гугла.
Как бороться с этим чертовым Vindex?

 

З.Ы. нашел инфу о AS61317, собственно о самих Digital Energy Technologies Ltd.
IP у них порядка 514к
Возможно стоит сделать просто блокировку по забугорным странам, но вопрос, как тогда будут обстоять дела с гуглоботом?

 

Определить IP гугла и сделать для него исключение.

 

А толку, они хотят удалить свой контент в рф, вот и будут удалять. Если сайт по рф заблочишь, тогда они захотят по юа удалить свой контент. И им пофиг, что россияни и украинцы не поедут в другую страну в их кинотеатр смотреть фильм, тойсть они из-за нас нечего не теряют. Тут просто цель все удалить оставить платники.

 

толк есть в том, что обход выполняет бот (боты?) с забугорных IP (список этих IP можно найти в гугле по запросу AS61317).
Маскируются они под user-agent mozilla и т.д., причем по логам апача 2-4 IP из подсети делают запросы почти что одновременно и остаются на странице от 0 до 5 секунд.
Настроить фаервол и банить таких, ну, так себе перспектива, т.к. есть шанс отправлять в бан потенциальных пользователей.
Суть идет о блокировке стран по базе geoip (с которых летят вот такие вот запросы), бан сайта не по рф/уа/кз и т.д., а предоставления доступа только тем странам, где отсутствую сервера этой вот компании (в странах где есть большая доля посетителей - банить исключительно подсети таких сервисов), что бы перестать получать жалобы DMCA.
Ибо есть огромная вероятность, что если бот получит ответ не 200, а 400/500, то он пропустит опрос url сайта.
Отсюда как итог меньше жалоб по DMCA и больше доверия гоши (читал в интернетах, что гоша начинает нелюбить, если много DMCA прилетает на домен).

 

Почему я думаю, что это боты делают запрос на 0-5 секунд, а не пользователь за натом - все просто. Навряд ли мне будут прилетать DMCA на страницы (с крайне непопулярными фильмами), которые посещали с одного и того же юзер агента (но с разных IP) за промежуток в пол часа, при этом все IP принадлежат одной компании. (Коротко - DET).
Не верю я в такие совпадения.

 

)))
Ты увидел только кусочек.
Что ты скажешь о том, что львиная доля абуз, летит от использования прог, которые просто из поиска берут твои урл. и даже не заходя на сайт.
Есть в выдаче определённый запрос, чек урл. и в DMCA запрос на автомате с предоставление всех доков для гугла.
И даже ты измени урл. на цифры - всё равно чекают по Title который ты не скроешь при любом раскладе, иначе твоего урл. не будет в топе.
Всё просто как дважды два.

 

Меньше пездите на форуме ненужное и будет вам счатья и долголетия.

 

Да, тоже так думал, предварительно чекал логи апача с запросами на страницы.
Прилетал DMCA от Vindex. Как я понял - Vindex дружит с DET (всегда DMCA прилетает после обхода URL от DET).
Еще сейчас стало часто прилетать от Group-IB по DMCA (почтой просьбы не шлют) + WebKontrol на почту спамит по 3-6 письма в неделю.
Как бороться - без понятия. Как искать - знаю, тратить на это месяц(месяцы) - нет возможности (есть основная работа, которая требует больше времени).
Подумываю встать за ns CloudFlare, где-то читал, что они не любят много однообразных get запросов с одной подсети по 0 сек. (исключение реальный боты гоши и яши).
P.S. скинул знакомому юристу документы, что шлет мне WebKontrol от правообладателя UPI (Universal Pictures), с ее слов "как вилами по воде в попытках собрать грибы", мол, какие то права есть, срок действия реализации прав на контент на территории РФ есть (1 год), но документ не пронумерован (хоть и написан на 2 языках как положено), дата подписания документа с наделением тех и(или) иных прав не указан на основной странице и(или) пронумерованной странице.
Кто как ведет борьбу с ними?
Новый домен + зеркало + склейка = так себе перспектива.
Пока что банят го*но с рейтингом КП от 3 до 5, но все равно обидно.
Прошу помощи, по возможности в ЛС.

 

Спойлер: d

del

 

А теперь коротко про DET из общедоступной информации:

Спойлер: Сполйер один

Digital Energy - российский разработчик облачной платформы последнего поколения. Платформа позволяет создавать масштабируемую, безопасную инфраструктуру, способную обрабатывать различные типы нагрузок: контейнеры, архивы большого размера, виртуальные машины, приложения Windows/Linux, blockchain engines, аналитика и AI.

Интересно? Мне тоже...
Идем дальше:
2019: Yadro приобрел 70% доли компании Digital Energy.
Если вы знаете, что такие Yadro - вопрос должен отпасть, если нет, то:

Спойлер: Спойлер для вас

Продукты компании применяются в российских организациях: Федеральной Миграционной службе РФ, АКБ «Банк Москвы», «Газпромбанк», ФГУП «Московский Метрополитен», Генеральной Прокураторе РФ и других.

Что-то мне подсказывает, что многих банят не спроста, а простой скан URL (как мне писали выше) - не основание для жалобы DMCA, т.к. любой сайт может принадлежать юридическому лицу, а если заблокировать URL страницы Юр. лица, то можно попасть на энную суму денег (неважно, сошлется "антипиратка" на ошибку кода или еще что, все хором вспоминаем законы РФ - отсудить можно все, даже последние трусы Валигурской из ВебКонтроля).
Осталось придумать грамотный способ ограничить DET от ресурсов.
Есть идеи на этот счет, от банальных до сказочных.

 

С каждым сообщением копаете себе могилу держу вкурсе.

 

Я выкопал себе могилу уже тогда, когда стал пиратом и получил доступ к балансерам.
Если надо - найдут каждого из нас (будь ты хоть за 3 vpn и прокси листом), а если администрация заинтересована в решении вопроса, то закроет тему от всеобщих глаз, или же удалит сообщения и создаст новую со всей собраной инфой.
Все что здесь опубликовано - есть в общедоступной штуке под названием "интерпол", или "тырнет", нет, вроде все таки "интерпол".

 

причем тут поиск кого то.

 

Просто вспомнился сериал на немного схожую тему, решил провести тонкую аналогию.

 

Вообщем всем намек понятен, ухожу в осмысление и продумывание окончательного метода реализации.

 

Ну так зачем сайт, если ты его везде забанишь. Ты просто запомни, правы и их боты смотрят выдачу из разных ай-пи и стран. Ты знаешь принцип работы ПС, зайди яндекс.фр. набери русский запрос, тебе выведет русский контент. Зайди в яндекс.ру, набери английский контент, выведет англ. сайты. Правы делают аналогично, они активно юзают ВПН разных стран и косят выдачу. 1 человек не сможет собрать столько ай-пи и забанить их, сил не хватит.
Можно попробовать по законы, закрыть сайт от РФ, и ЮА, и по сути ты не нарушаешь права украинских и российских правов, так-как не транслируешь контент в этих странах. Но есть и другая сторона, ты же в общем транслируешь материал (фильм), и ссылки на видео на твоем сайте есть... В общем все сделано так, что бы нас жать.
Ранее были способы значительно уменьшить абузы, но сейчас уже не работают. Причина одна, пиздели в отрытой ветке, так бы дольше тема держалась.

 

Генеральный директор "ВЕБ КОНТРОЛЬ" Валигурская Ольга Владимировна
Задекларировала выручку за 2018 год, 75 миллионов рублей.
Походу бороться с пиратством более выгодное занятие, чем быть пиратом.

Реквизиты ООО "Веб Контроль", Москва, и другая информация об организации на Rusprofile.ru


Ольга Валигурская

Основатель и генеральный директор компании WebKontrol

Закончила University of Essex и Booker T. Washington High School. В 2009 году основала международную компанию WebKontrol, которая которая защищает интересы правообладателей от незаконного копирования контента.

Ещё здесь почитайте как работает их система поиска:
ОЛЬГА ВАЛИГУРСКАЯ: «ЕСЛИ ТЫ ВЕДЕШЬ БИЗНЕС — СДЕЛАЙ ТАК, ЧТОБЫ ТВОЙ БИЗНЕС ВЕЛ СЕБЯ ПРАВИЛЬНО»

 

Читал эту статью, с WebKontrol еще пока что разбираюсь.
Что касаемо второго. Он (робот Vindex) работает иначе, чем робот WebKontrol, потому что Vindex загружает страницу, и в случае получения 200 ответа от сервера с интересующей его инфой - прилетает DMCA (от WebKontrol get запросы не нашел, или же плохо искал, но тупо по title он банить не должен, ну, мне так кажется).
P.S. Про то, что сидят реальные живые люди и рыщут странички с контентом, которые надо заблокировать - я и слова не говорил.
P.S.S. Если еще кто-то хочет сказать, что блокировать рф/уа/снг трафикк не поможет, у антипираток есть ВПН и т.д. - возвращаемся к первым моим сообщениям в этом посте и внимательно читаем, о чем идет речь. Речь не о блокировке трафика в рф/снг, а наоборот, в предоставлении доступа только с ру/снг с последующей блокировкой серверов антипираток в ру/снг.
Намного проще найти иголку на столе, чем копаться в ее поисках по всей квартире.

 

Вот оно че, я смотрю а то у вебконтроля вместо 2 точки монинга за 10лет, появилось с 100~ точек. С 78ляма видать не пожалели пару тысяч на впски. Дауны)