Копался в вебмастере яндекса и нашел кучу страниц вида "/index.php?cstart=71&do=lastcomments". Как правильно закрыть сие чудо в роботс.тхт от индексации? Не очень силен в этих роботсах с их слешами, звездачками и тд и тп Прописано на данный момент вот так: Code: Disallow: /?do=lastcomments
А на кой хрен они в выдаче нужны отдельной страницей, еще с пагинацией на 500 страниц? Контент дублируется в добавок (комменты на страницах с фильмами и на странице с комментами). Отбой. Забыл, что донбот стоит, дописал тег, все закрылось. Но можете ответить, мало ли кому пригодиться когда-нибудь.
Теперь еще вопрос. Нашел вот таких страниц гору: Code: http://***/index.php?do=stoptime&id=2140&action=count Откуда они берутся и что это? И как бы их закрыть?