Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Помогите отредактировать robots.txt

Тема в разделе "Яндекс", создана пользователем Fant13k, 16 фев 2016.

16.02.16 в 17:40
Fant13k
16.02.16 в 20:41
Fant13k
7
1.030
0
Ответить в теме
  1. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Здравствуйте. Знаю что скорее всего на форуме где-то есть подобная тема, но честно сказать я пересмотрел разделы Яндекс и Google но не нашел ответа на свой вопрос. Подскажите как правильно составить robots для Яндекса и Гугла.
    User-agent: *
    Disallow: /year/
    Disallow: /country/
    Disallow: /produce/
    Disallow: /actors/
    Disallow: /engine/go.php
    Disallow: /engine/download.php
    Disallow: /user/
    Disallow: /newposts/
    Disallow: */page/
    Disallow: /statistics.html
    Disallow: /*subaction=userinfo
    Disallow: /*subaction=newposts
    Disallow: /*do=lastcomments
    Disallow: /*do=feedback
    Disallow: /*do=register
    Disallow: /*do=lostpassword
    Disallow: /*do=addnews
    Disallow: /*do=stats
    Disallow: /*do=pm
    Disallow: /*do=search
     
    #1 Fant13k, 16 фев 2016
  2. crank

    crank Зелёный

    Регистрация:
    6 окт 2015
    Сообщения:
    18
    Лучших ответов:
    0
    Рейтинги:
    +4 / 0 / -0
    У каждого по своему
    User-agent: Yandex
    Disallow: /user/
    Disallow: /backup/
    Disallow: /engine/
    Disallow: /language/
    Disallow: /templates/
    Disallow: /upgrade/
    Disallow: /uploads/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /?do=lastcomments
    Disallow: /statistics.html
    Host: са-йт.ru

    User-agent: *
    Disallow: /backup/
    Disallow: /user/
    Disallow: /engine/
    Disallow: /language/
    Disallow: /upgrade/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /?do=lastcomments
    Disallow: /statistics.html

    Sitemap: http://са-йт.ru/sitemap.xml
     
    #2 crank, 16 фев 2016
  3. Den

    Den
    Команда форума VIP Кинотрафик v2

    Регистрация:
    19 окт 2015
    Сообщения:
    2.129
    Лучших ответов:
    0
    Рейтинги:
    +1.004 / 6 / -0
    Означает, что эти правила действуют для всех роботов.
    Для яндекса можешь добавить внизу главное зеркало и ссылку на карту сайта:
    Код:
    Host: mysite.ru
Sitemap: http://mysite.ru/sitemap.xml
     
    #3 Den, 16 фев 2016
  4. doz

    doz
    Команда форума VIP Кинотрафик v2

    Регистрация:
    10 окт 2015
    Сообщения:
    1.335
    Лучших ответов:
    0
    Рейтинги:
    +540 / 0 / -0
    User-agent: *
    Disallow: /engine/
    Sitemap: http://site.ru/sitemap.xml
    Host: site.ru

    остальное закрывается метатегом.
     
    #4 doz, 16 фев 2016
  5. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Спасибо всем. @doz, можно по подробнее о метатеге?
     
    #5 Fant13k, 16 фев 2016
  6. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Модуль от Gameer NoIndex подойдет для этого?
     
    #6 Fant13k, 16 фев 2016
  7. Uralbox

    Uralbox
    Команда форума VIP Кинотрафик v2

    Регистрация:
    25 окт 2015
    Сообщения:
    1.593
    Лучших ответов:
    0
    Рейтинги:
    +184 / 5 / -0
    Конечно, 100%
     
    #7 Uralbox, 16 фев 2016
  8. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Еще один вопрос, не хочу создавать отдельно тему.
    Подскажите какова частотность ВЧ, СЧ, НЧ для киносайта.
     
    #8 Fant13k, 16 фев 2016
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)
Похожие темы
  1. JloTyC

    Прошу проверить robots.txt

    JloTyC, 25 июл 2015, в разделе: Яндекс
    Ответов:
    21
    Просмотров:
    2.254
    JloTyC
    8 авг 2015
  2. Avenger

    Индекс старых страниц. помогите!

    Avenger, 27 фев 2016, в разделе: Яндекс
    Ответов:
    4
    Просмотров:
    1.683
    Avenger
    29 фев 2016
  3. ExScorpio

    Проблемы с robots.txt

    ExScorpio, 25 окт 2016, в разделе: Яндекс
    Ответов:
    20
    Просмотров:
    2.225
    Sland
    29 ноя 2016
Загрузка...
Переключить ширину
Стиль
Zerocool-New
Язык
Russian (RU)
Яндекс.Метрика