В яндексе проиндексировались все странички, теги с актерами более 300 хорошо это или плохо, может стоит подредактировать роботс.тхт
Это скорее плохо, чем хорошо. Страницы тегов ничем не уникальны для ПС, текста минимум. Эти страницы сначала влетают в индекс, а через пару апов вылетают. В общем случае, такие пустышки плохо влияют на отношение пс к сайту, поэтому в роботс всегда закрывают... Может я не прав?
это по всей видимости страницы по типу /tags такие надо искоренять! хорошего от них не будет. если теги создаются автоматом, см пункт в парсере кинопоиска и вырубай их там (не путать в перекрестными ссылками у доп полей когда урл xfsearch)
Думаю, аналогичная ситуация. Яндекс в основном херачит ток режиссёров и актеров(( Теги отключены. Подскажите в чем проблема(( Spoiler И че эт за поле вообще "xfsearch"
Это вот так?! Disallow: /xfsearch/ У меня щас вообще вот такой robots Code: User-agent:* Disallow: /engine/go.php Disallow: /user/ Disallow: /newposts/ Disallow: /statistics.html Disallow: /*subaction=userinfo Disallow: /*subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /*do=search Disallow: /*do=download Disallow: /*do=go Host: https://сайт.ру Sitemap: https://сайт.ру/sitemap.xml
vadimlgg2 слушай, дружище, может я что не так прописал?! Только что обновилась поисковая база и там опять 90% атеры и режиссёры Вроде сделал так как ты сказал прописал в robots Disallow: /xfsearch/ Может что не так прописал?! Помоги пожалуйста robots у меня такой Code: User-agent:* Disallow: /engine/go.php Disallow: /user/ Disallow: /newposts/ Disallow: /statistics.html Disallow: /*subaction=userinfo Disallow: /*subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /*do=search Disallow: /*do=download Disallow: /*do=go Disallow: /xfsearch/ Host: https://сайт.ру Sitemap: https://сайт.ру/sitemap.xml
у меня роботс такой: Code: User-agent: * Disallow: /*print Disallow: /user/ Disallow: /index.php Disallow: /backup/ Disallow: /addnews.html Disallow: /tags/ Disallow: /page Disallow: /?do=about Disallow: /index.php?do=pm Disallow: /index.php?do=search Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?subaction=newposts Disallow: /index.php?do=stats Disallow: /?do=license Disallow: /?do=members Disallow: /*?url* Disallow: /index.php?do=rules Disallow: /rules.html Disallow: /rss.xml
А эти страницы в индексе, так же пагубно влияют? Если да, то как от их избавиться? Может быть у кого то есть полный robots.txt /2019/07/page/364/ /actors/Дарья+Пицик/
У меня получается ссылки такие: сайт.ру/2019/07/page/364/ сайт.ру/actors/Дарья+Пицик/ Писать так? Disallow: */page/* Disallow: */actors/* Или Disallow: */page/* Disallow: /actors/*
Я переспросил) У меня получается ссылки такие: сайт.ру/2019/07/page/364/ сайт.ру/actors/Дарья+Пицик/ Писать так? Disallow: */page/* Disallow: */actors/* Или Disallow: */page/* Disallow: /actors/*