Заходы с толоки (toloka)!

Парни в веб визоре заметил, что с толоки Яндекса на страницы заходят рабы, можно как-то узнать, какое в толлоке им дано задание?
В поиске толоки ввожу домен сайта, нефига нет.

 

Нет нельзя. Скорее всего, сбор данных. По всему сайту суслики бегают, или конкретная страница?

 

Конкретные страницы, 3 из них уже под меморандумом, похожие страницы вчера попали под меморандум, хотя плеера ютюбовские были.

 

Значит проверка. Так часто шуршат. Прав в основном на поиск порно на сайте.

 

Робот иногда не понимает содержание контента, тогда посылают сусликов с толоки.

 

Так нафига на страницы которые уже под меморандумом, посылать рабов. Они же не в поиске.

 

Хз. Банальное задание от правообладателя (возможно кинопоиск), если страницы есть в гугле к примеру, чтобы выкосить и там. (В толоке были когда-то задания на проверку работоспособности плеера, ща хз)

 

Судя по веб визору, одни смотрят плеер, другие тупо текст. Вот причем текст...
Даже не думал, что правообладатели будут в толоке сидеть выкашивать таким образом. Обычно бот все выкосит и все дела. Они же выдачу для себя чистят, а не думают правильно ли они удалили имели ли на это права и т.д.

 

Робот не все видит. Некоторые пишут скрип подмены. Для робота одна страница, для человека другая. Для проверки толока хорошо подходит. Зачем текст читают, хз.

 

Ладно, понаблюдаю, че дальше будет.

 

На другом форуме видел обсуждение подобное, некоторые даже блокируют толокеров. Но есть мнение, что ни к чему хорошему это тоже не приведет.

 

Да не, но и бороться с ними бесполезно. Забанишь одного, придёт другой. Их нужно принять как должное.

 

Вот это пропиши в .htaccess

Код:

RewriteEngine On

RewriteCond %{HTTP_REFERER} ^https://iframe-toloka.(.*) [NC]
RewriteRule .* - [F]

 

Что он делает? Выдаёт ошибку 403?

 

Смысла банить только усложнять им проверку, они потом открываются просто в новой вкладке без реферера

 

Тоже перед созданием темки читал другие форумы тоже подобное писали. Доверия больше к этому форуму, поэтому тут создал темку, которой вроде еще нет.