Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Вопрос? Robots.txt блокирует индексацию категорий (opencart)

Тема в разделе "Google", создана пользователем MIKE_FM, 28 июн 2019.

28.06.19 в 01:38
29.06.19 в 10:04
12
967
0
  1. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Проблема, товарищи. Есть сайт на Opencart 2.3 ****
    Проверяя ответ сервера и добавляя страницы в переобход в вебмастере наткнулся на то, что ПС не могут проиндексировать страницы категорий ибо это запрещено в robots.txt
    Но я туда ничего не прописывал от себя. Взял стандартный его вид для Opencart на их же форуме и всё.

    Когда удаляю всё, кроме юзер агента:* и хоста с сайтмапом - всё нормально.
    Кто подскажет, что может мешать страницам категории индексироваться?
    (забегу наперёд и скажу, что проблему с Яндексом удалось решить, поставив слэш после строки Disallow: /catalog)

    Содержимое файла роботс:

    User-agent: *
    Disallow: /*route=account/
    Disallow: /*route=affiliate/
    Disallow: /*route=checkout/
    Disallow: /*route=product/search
    Disallow: /index.php?route=product/product*&manufacturer_id=
    Disallow: /admin
    Disallow: /catalog/
    Disallow: /system
    Disallow: /*?sort=
    Disallow: /*&sort=
    Disallow: /*?order=
    Disallow: /*&order=
    Disallow: /*?limit=
    Disallow: /*&limit=
    Disallow: /*?filter_name=
    Disallow: /*&filter_name=
    Disallow: /*?filter_sub_category=
    Disallow: /*&filter_sub_category=
    Disallow: /*?filter_description=
    Disallow: /*&filter_description=
    Disallow: /*?tracking=
    Disallow: /*&tracking=
    Disallow: /*compare-products
    Disallow: /*search
    Disallow: /*cart
    Disallow: /*checkout
    Disallow: /*login
    Disallow: /*logout
    Disallow: /*vouchers
    Disallow: /*wishlist
    Disallow: /*my-account
    Disallow: /*order-history
    Disallow: /*newsletter
    Disallow: /*return-add
    Disallow: /*forgot-password
    Disallow: /*downloads
    Disallow: /*returns
    Disallow: /*transactions
    Disallow: /*create-account
    Disallow: /*recurring
    Disallow: /*address-book
    Disallow: /*reward-points
    Disallow: /*affiliate-forgot-password
    Disallow: /*create-affiliate-account
    Disallow: /*affiliate-login
    Disallow: /*affiliates
    Disallow: /*?filter_tag=
    Disallow: /*brands
    Disallow: /*specials
    Disallow: /*simpleregister
    Disallow: /*simplecheckout
    Disallow: *utm=
    Allow: /catalog/view/javascript/
    Allow: /catalog/view/theme/*/

    User-agent: Yandex
    Disallow: /*route=account/
    Disallow: /*route=affiliate/
    Disallow: /*route=checkout/
    Disallow: /*route=product/search
    Disallow: /index.php?route=product/product*&manufacturer_id=
    Disallow: /admin
    Disallow: /catalog/
    Disallow: /system
    Disallow: /*?sort=
    Disallow: /*&sort=
    Disallow: /*?order=
    Disallow: /*&order=
    Disallow: /*?limit=
    Disallow: /*&limit=
    Disallow: /*?filter_name=
    Disallow: /*&filter_name=
    Disallow: /*?filter_sub_category=
    Disallow: /*&filter_sub_category=
    Disallow: /*?filter_description=
    Disallow: /*&filter_description=
    Disallow: /*compare-products
    Disallow: /*search
    Disallow: /*cart
    Disallow: /*checkout
    Disallow: /*login
    Disallow: /*logout
    Disallow: /*vouchers
    Disallow: /*wishlist
    Disallow: /*my-account
    Disallow: /*order-history
    Disallow: /*newsletter
    Disallow: /*return-add
    Disallow: /*forgot-password
    Disallow: /*downloads
    Disallow: /*returns
    Disallow: /*transactions
    Disallow: /*create-account
    Disallow: /*recurring
    Disallow: /*address-book
    Disallow: /*reward-points
    Disallow: /*affiliate-forgot-password
    Disallow: /*create-affiliate-account
    Disallow: /*affiliate-login
    Disallow: /*affiliates
    Disallow: /*?filter_tag=
    Disallow: /*brands
    Disallow: /*specials
    Disallow: /*simpleregister
    Disallow: /*simplecheckout
    Disallow: *utm=
    Allow: /catalog/view/javascript/
    Allow: /catalog/view/theme/*/
     
  2. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.296
    Лучших ответов:
    31
    Рейтинги:
    +3.894 / 96 / -0
     
    • Нравится Нравится x 2
  3. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Ха, а конченые всё не угомонятся :)
     
  4. wawe

    PRO Users

    Регистрация:
    23 янв 2017
    Сообщения:
    3.549
    Лучших ответов:
    6
    Рейтинги:
    +1.574 / 404 / -0
    Кривые руки и отсутствие мозгов, у СЕО гуру.
     
    • Нравится Нравится x 1
  5. anime

    anime Бывалый

    Регистрация:
    21 фев 2017
    Сообщения:
    240
    Лучших ответов:
    1
    Рейтинги:
    +67 / 0 / -0
    Не знаю какой у этой CMS url категорий, но возможно вот эта строчка мешает Disallow: /catalog/
     
  6. synlivcho

    PRO Users

    Регистрация:
    24 окт 2018
    Сообщения:
    749
    Лучших ответов:
    2
    Рейтинги:
    +99 / 30 / -0
    В самом вопросе был, ответ. Тс в роботс выставляет: Disallow: /catalog/ , потом пишет "ПС не могут проиндексировать страницы, страницы категорий" .

    Я под утро смотрел, пост сначала думал не буду не чего писать, может что то не догнал :D
     
    • Нравится Нравится x 1
  7. wawe

    PRO Users

    Регистрация:
    23 янв 2017
    Сообщения:
    3.549
    Лучших ответов:
    6
    Рейтинги:
    +1.574 / 404 / -0
    Тс просто мазахист, кайфует когда в него кидают ссаными тапками за его тупые действия.
    При том что он ещё и занимается продажей сео услуг.
    А потом орёт что все кругом да...бы, а он красавчик.
     
    • Нравится Нравится x 1
  8. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Увы, но ТС в роботс ничего не выставлял, просто скопировал рекомендованый с форума самой CMS.
    И для тех, кто пытается подъебать, не зная темы - категории размещаются в /catalogS. Так что, мимо, товарищи )) Незачёт :)

    Ну да, однозначно тут есть да...бы. Я даже не буду говорить кто. Они сами догадаются и вот-вот подадут голос ;)
     
    • Смешно Смешно x 1
  9. wawe

    PRO Users

    Регистрация:
    23 янв 2017
    Сообщения:
    3.549
    Лучших ответов:
    6
    Рейтинги:
    +1.574 / 404 / -0
    Ну тут если логически помыслить - ТС тупит или создатель CMS. Третьего не дано.
    Очевидно - не так ли ?

    Вопрос: кто дурак ? :D
    Сектор приз на барабане - приз или супер игра ? Тс ? :rolleyes:
     
    • Нравится Нравится x 1
  10. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Мда... ты - это тупиковый вариант развития.

    Как ты вообще живешь таким долбоёбом?)

    А вот это вообще не твоё.
     
  11. wawe

    PRO Users

    Регистрация:
    23 янв 2017
    Сообщения:
    3.549
    Лучших ответов:
    6
    Рейтинги:
    +1.574 / 404 / -0
    :D А жалобка на что ?
    [​IMG]
    Ответь по существу. Не можешь ? )) Потому-что не способен.
    А херами крыть мозгов не нужно иметь. )) Что собственно ты и подтверждаешь, каждым своим топиком. ))

    Прости конечно - но это диагноз уже. )) ;)
     
    • Согласен Согласен x 1
  12. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Это кто бы говорил )))
    Слушай, ты как в воду смотришь.
     
  13. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Регистрация:
    27 дек 2015
    Сообщения:
    1.884
    Лучших ответов:
    2
    Рейтинги:
    +370 / 43 / -0
    Всё, вопрос решился и закрыт.
    Клоуны, можете идти отдыхать :)
     
Яндекс.Метрика