Обсуждение Вопрос? Приложение для просмотра фильмов на виндовс грузит сайт

[sunx]

Привет!
Мой сайт добавлен в одно из приложений для просмотра киношек на Виндовс. Но профита я из этого не получаю никакого.

Пользователи в этом приложении просто ищут контент, а само приложение производит поиск по всем источникам, естественно и по моему сайту тоже, и не важно, находит ли оно контент в моей базе или нет, 90% их юзеров даже не знают о существовании моего сайта, переходов на сайт тоже нет. Смотрят видосы в самом приложении, но запросы по поиску и нагрузку создают.

В день может доходить до 30к+. По сути - это еще и мусор, который искажает реальную внутреннюю статистику поисковых запросов моих пользователей.

Как видно, тут их забанили. Но опять же, каким образом? это ведь не парсер, один запрос - один человек/ip, и их тысячи.

Какое решение данной проблемы видите вы?
Думал эти кровопийцы привязаны к какому-то класу из блока поиска, изменение html результата не дало.
Пробовал изменять урл поиска в engine/modules/search.php

/index.php?do=search

на

/index.php?do=search-2

проблема со статистикой решилась, но пришлось отключить модуль поиска (закодирован, конкретно там нет возможности изменить урл). Впрочем, через power log вижу, что запросы продолжают приходить на /index.php?do=search в тех же объемах, тк эта страница все еще доступна, но в полном поиске при, опять же, поиске фильма уже перекидает на /index.php?do=search-2

Как избавиться от этого говна?

 

[Bashmak]

Антибота попробуй установить, может поможет.

 

[Al123]

скинь название приложения. посмотрим хоть как оно работает

 

[S37]

Без полных логов что-то конкретное сказать трудно. Самый простой способ - на старый адрес для поиска подсунуть скрипт, который будет все айпи-адреса вносить в блок-лист
Если сайт популярный, то они будут обновлять программу или вообще конфиг (смотря как программа написана) и подстраиваться под все изменения

 

[Kandi]

Чтобы понять как от этого избавиться надо разобраться какие запросы делает софт для поиска на твоём сайте. Изменить запросы поиска и радоваться жизни.

 

[ZULI]

а если Content Security Policy настроить, может поможет?

 

[Kandi]

а если Content Security Policy настроить, может поможет?

Очень мало вероятно, CSP правил придерживаются только браузеры

 

[Zagad]

Как вариант использовать Cloudflare и выставить на страницу поиска заглушку для проверки капчи. Еще бы я посмотрел там же логи и убедился бы точно, что это не парсер, там можно отфильтровать все запросы по конкретной странице и посмотреть сколько запросов с конкретного айпи. Но лучше понять, как это сделали на Резке... может кто спросит их))

 

[S37]

Как вариант использовать Cloudflare и выставить на страницу поиска заглушку для проверки капчи. Еще бы я посмотрел там же логи и убедился бы точно, что это не парсер, там можно отфильтровать все запросы по конкретной странице и посмотреть сколько запросов с конкретного айпи. Но лучше понять, как это сделали на Резке... может кто спросит их))

Да много есть вариантов защиты от ботов и простых парсеров. Все дело в ресурсах.
Их программа, скорее всего, просто отрпавляет запросы напрямую на сайт, не загружает никакие картинки/css/js файлы и тд с сайта. Поэтому можно анализировать логи веб-сервера, искать айпишник и смотреть его запросы - есть там запросы к файлам или нет. И потом блокировать такие айпишники. Можно динамически через js добавлять специальную картинку в 1 пиксель с рандомным названием, и отслеживать ее загрузку.