В общем недавно решил просканировать сайт на наличие ссылок, и понял что данный модуль образует очень много генерированных ссылок, не несущих полезной информации. Вопрос: Как запретить индексацию всего модуля. Пример модуля тут: http:// 8dle. ru/sell-modules/4964-modul-stol-zakazov-dlya-dle.html
Запретить к индексации в robots.txt, если я правильно понял проблему. Примера по ссылке нету, только скрины
А зачем звёздочка? Разве исполняющий php файл меняется каждые N секунд? Просто добавляем полный путь в роботс
Я просто делал на основе других страниц. Для примера кусок кода: Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /*do=search Disallow: /*do=orderdesc
Ребята, у меня вот ссылка на стол заказов вот такого вида http://сайт.net/index.php?do=orderdesc. Что бы правильно закрыть ее от индексации поисковиками в роботсе прописывать так Disallow: /*index.php?do=orderdesc или так Disallow: /*do=orderdesc? Спасибо зарание за ответ.
