Я себе на сайте например стату ботов вывожу в виде: Код: Роботы на сайте Yahoo! 2.01 23:34 oBot 2.01 23:33 baidu 2.01 23:27 Yandex 2.01 23:09 MJ12bot 2.01 22:38 googlebot 31.12 02:27 psbot 25.12 23:21 alexa 19.12 04:45 StackRambler 25.11 14:29 archive_org 12.11 13:07 ****************другой сайт где яша живет********** Yandex 2.01 23:38 Yahoo! 2.01 23:37 googlebot 2.01 23:35 MJ12bot 2.01 22:54 java 2.01 22:05 Twitter bot 2.01 17:05 teoma 2.01 12:53 slurp 2.01 12:30 ia_archiver 2.01 10:19 psbot 2.01 06:35 Время стоит моего региона чтобы не высчитать часовые пояса))) На всех сайтах где боты есть - всегда разбер 1-2 минуты всего, но зато видно что они есть. Эта стата с одного сайта который гугл никак не хочет индексировать, заходит раз в месяц, а 31-го наверно поздравить меня хотел, но я частично временно забил на сайт, и живет он своей жизнью и ботов не зовет за новым контентом которого нет))
Ты не понял, сайт индексируется, но слабо, а в быстробот ни одна страница не влетела, вот я о чём. @byroot, как её поставить?
@Olegjan, была схожая проблема с Яндексом. Написал в платонам - получил стандартный ответ, типо все норм. Потом индексация выравнялась, индексируются все страницы после апа. На данный момент проиндексировано 1400 страниц,траф - 100-200. Видимо, в самом начале Яше что-то не понравилось (после я постарался исправить косяки), и теперь он приглядывается к сайту. Вот только приглядываться будет очень долго, как всегда. Сейчас я забил на Яндекс, как говорится, не жили богато, нечего начинать) Кстати, по гетботу тоже глухо, он нужен только на сайтах, где все в порядке с индексацией, но хочется подстраховаться.