Ну как сказать, как сказать... Вебконтроль например всегда после ботов вручную проверяют, а иногда даже перед ботом человек смотрит, виндекс так же... Даже если боты получили по зубам, обязательно зайдёт человек и удостоверится, всё ли так на самом деле. Мне попадались только контентскан, да гроб айби из касты "прифигевших", и с большой пятой точкой по ходу. Сначала заходили как положено, и боты, а в случае чего и люди, а теперь они по ходу или смотрят в поиске "сохранённую версию", или просто выдачу поисковую "читают по словам". Но ведь так и нарваться можно... Зацепят так "за слово" какой-нибудь белый сайт или интернет-магазин с хозяином "с возможностями", и их так насадят за потерю трафика, репутации, и финансов, что долго потом у них, и у их большой пятой точки, собственные пердаки болеть будут.