Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Помогите отредактировать robots.txt

Тема в разделе "Яндекс", создана пользователем Fant13k, 16 фев 2016.

16.02.16 в 17:40
Fant13k
16.02.16 в 20:41
Fant13k
7
1.926
0
Ответить в теме
  1. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Здравствуйте. Знаю что скорее всего на форуме где-то есть подобная тема, но честно сказать я пересмотрел разделы Яндекс и Google но не нашел ответа на свой вопрос. Подскажите как правильно составить robots для Яндекса и Гугла.
    User-agent: *
    Disallow: /year/
    Disallow: /country/
    Disallow: /produce/
    Disallow: /actors/
    Disallow: /engine/go.php
    Disallow: /engine/download.php
    Disallow: /user/
    Disallow: /newposts/
    Disallow: */page/
    Disallow: /statistics.html
    Disallow: /*subaction=userinfo
    Disallow: /*subaction=newposts
    Disallow: /*do=lastcomments
    Disallow: /*do=feedback
    Disallow: /*do=register
    Disallow: /*do=lostpassword
    Disallow: /*do=addnews
    Disallow: /*do=stats
    Disallow: /*do=pm
    Disallow: /*do=search
     
    #1 Fant13k, 16 фев 2016
  2. crank

    crank Зелёный

    Регистрация:
    6 окт 2015
    Сообщения:
    18
    Лучших ответов:
    0
    Рейтинги:
    +4 / 0 / -0
    У каждого по своему
    User-agent: Yandex
    Disallow: /user/
    Disallow: /backup/
    Disallow: /engine/
    Disallow: /language/
    Disallow: /templates/
    Disallow: /upgrade/
    Disallow: /uploads/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /?do=lastcomments
    Disallow: /statistics.html
    Host: са-йт.ru

    User-agent: *
    Disallow: /backup/
    Disallow: /user/
    Disallow: /engine/
    Disallow: /language/
    Disallow: /upgrade/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /?do=lastcomments
    Disallow: /statistics.html

    Sitemap: http://са-йт.ru/sitemap.xml
     
    #2 crank, 16 фев 2016
  3. Den

    Den
    Команда форума VIP Кинотрафик v2

    Регистрация:
    19 окт 2015
    Сообщения:
    2.097
    Лучших ответов:
    0
    Рейтинги:
    +1.002 / 7 / -0
    Означает, что эти правила действуют для всех роботов.
    Для яндекса можешь добавить внизу главное зеркало и ссылку на карту сайта:
    Код:
    Host: mysite.ru
Sitemap: http://mysite.ru/sitemap.xml
     
    #3 Den, 16 фев 2016
  4. doz

    doz
    Команда форума VIP Кинотрафик v2

    Регистрация:
    10 окт 2015
    Сообщения:
    1.335
    Лучших ответов:
    0
    Рейтинги:
    +540 / 0 / -0
    User-agent: *
    Disallow: /engine/
    Sitemap: http://site.ru/sitemap.xml
    Host: site.ru

    остальное закрывается метатегом.
     
    #4 doz, 16 фев 2016
  5. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Спасибо всем. @doz, можно по подробнее о метатеге?
     
    #5 Fant13k, 16 фев 2016
  6. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Модуль от Gameer NoIndex подойдет для этого?
     
    #6 Fant13k, 16 фев 2016
  7. Uralbox

    Uralbox
    Команда форума VIP Кинотрафик v2

    Регистрация:
    25 окт 2015
    Сообщения:
    1.566
    Лучших ответов:
    0
    Рейтинги:
    +186 / 5 / -0
    Конечно, 100%
     
    #7 Uralbox, 16 фев 2016
  8. TopicStarter Overlay
    Fant13k

    Fant13k Посетитель

    Регистрация:
    7 фев 2016
    Сообщения:
    73
    Лучших ответов:
    0
    Рейтинги:
    +10 / 1 / -0
    Еще один вопрос, не хочу создавать отдельно тему.
    Подскажите какова частотность ВЧ, СЧ, НЧ для киносайта.
     
    #8 Fant13k, 16 фев 2016
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)
Похожие темы
  1. Romantv

    Платно. отредактировать скин плеера.

    Romantv, 4 дек 2016, в разделе: Свободное общение
    Ответов:
    11
    Просмотров:
    2.496
    Romantv
    5 дек 2016
  2. BROKER

    Как отредактировать файл?

    BROKER, 3 фев 2017, в разделе: Свободное общение
    Ответов:
    8
    Просмотров:
    1.748
    aeneas
    4 фев 2017
  3. BROKER

    Как отредактировать файл?

    BROKER, 3 фев 2017, в разделе: Вопросы- ответы
    Ответов:
    3
    Просмотров:
    2.583
    BROKER
    3 фев 2017
  4. Superwanget

    Помогите настроить файл robots.txt

    Superwanget, 21 фев 2017, в разделе: Аудиты сайтов - оценка функционала, юзабилити
    Ответов:
    2
    Просмотров:
    918
    Karabas Barabas
    21 фев 2017
  5. Ne2p

    Вопрос? Как отредактировать текста в {error}

    Ne2p, 28 фев 2021, в разделе: Вопросы- ответы
    Ответов:
    2
    Просмотров:
    457
    Ne2p
    1 мар 2021
Загрузка...
Переключить ширину
Стиль
Zerocool-New
Язык
Russian (RU)
Яндекс.Метрика