Dismiss Notice
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Вопрос? Robots.txt блокирует индексацию категорий (opencart)

Discussion in 'Google' started by MIKE_FM, Jun 28, 2019.

28.06.19 в 01:38
29.06.19 в 10:04
12
1,777
0
  1. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Проблема, товарищи. Есть сайт на Opencart 2.3 ****
    Проверяя ответ сервера и добавляя страницы в переобход в вебмастере наткнулся на то, что ПС не могут проиндексировать страницы категорий ибо это запрещено в robots.txt
    Но я туда ничего не прописывал от себя. Взял стандартный его вид для Opencart на их же форуме и всё.

    Когда удаляю всё, кроме юзер агента:* и хоста с сайтмапом - всё нормально.
    Кто подскажет, что может мешать страницам категории индексироваться?
    (забегу наперёд и скажу, что проблему с Яндексом удалось решить, поставив слэш после строки Disallow: /catalog)

    Содержимое файла роботс:

    User-agent: *
    Disallow: /*route=account/
    Disallow: /*route=affiliate/
    Disallow: /*route=checkout/
    Disallow: /*route=product/search
    Disallow: /index.php?route=product/product*&manufacturer_id=
    Disallow: /admin
    Disallow: /catalog/
    Disallow: /system
    Disallow: /*?sort=
    Disallow: /*&sort=
    Disallow: /*?order=
    Disallow: /*&order=
    Disallow: /*?limit=
    Disallow: /*&limit=
    Disallow: /*?filter_name=
    Disallow: /*&filter_name=
    Disallow: /*?filter_sub_category=
    Disallow: /*&filter_sub_category=
    Disallow: /*?filter_description=
    Disallow: /*&filter_description=
    Disallow: /*?tracking=
    Disallow: /*&tracking=
    Disallow: /*compare-products
    Disallow: /*search
    Disallow: /*cart
    Disallow: /*checkout
    Disallow: /*login
    Disallow: /*logout
    Disallow: /*vouchers
    Disallow: /*wishlist
    Disallow: /*my-account
    Disallow: /*order-history
    Disallow: /*newsletter
    Disallow: /*return-add
    Disallow: /*forgot-password
    Disallow: /*downloads
    Disallow: /*returns
    Disallow: /*transactions
    Disallow: /*create-account
    Disallow: /*recurring
    Disallow: /*address-book
    Disallow: /*reward-points
    Disallow: /*affiliate-forgot-password
    Disallow: /*create-affiliate-account
    Disallow: /*affiliate-login
    Disallow: /*affiliates
    Disallow: /*?filter_tag=
    Disallow: /*brands
    Disallow: /*specials
    Disallow: /*simpleregister
    Disallow: /*simplecheckout
    Disallow: *utm=
    Allow: /catalog/view/javascript/
    Allow: /catalog/view/theme/*/

    User-agent: Yandex
    Disallow: /*route=account/
    Disallow: /*route=affiliate/
    Disallow: /*route=checkout/
    Disallow: /*route=product/search
    Disallow: /index.php?route=product/product*&manufacturer_id=
    Disallow: /admin
    Disallow: /catalog/
    Disallow: /system
    Disallow: /*?sort=
    Disallow: /*&sort=
    Disallow: /*?order=
    Disallow: /*&order=
    Disallow: /*?limit=
    Disallow: /*&limit=
    Disallow: /*?filter_name=
    Disallow: /*&filter_name=
    Disallow: /*?filter_sub_category=
    Disallow: /*&filter_sub_category=
    Disallow: /*?filter_description=
    Disallow: /*&filter_description=
    Disallow: /*compare-products
    Disallow: /*search
    Disallow: /*cart
    Disallow: /*checkout
    Disallow: /*login
    Disallow: /*logout
    Disallow: /*vouchers
    Disallow: /*wishlist
    Disallow: /*my-account
    Disallow: /*order-history
    Disallow: /*newsletter
    Disallow: /*return-add
    Disallow: /*forgot-password
    Disallow: /*downloads
    Disallow: /*returns
    Disallow: /*transactions
    Disallow: /*create-account
    Disallow: /*recurring
    Disallow: /*address-book
    Disallow: /*reward-points
    Disallow: /*affiliate-forgot-password
    Disallow: /*create-affiliate-account
    Disallow: /*affiliate-login
    Disallow: /*affiliates
    Disallow: /*?filter_tag=
    Disallow: /*brands
    Disallow: /*specials
    Disallow: /*simpleregister
    Disallow: /*simplecheckout
    Disallow: *utm=
    Allow: /catalog/view/javascript/
    Allow: /catalog/view/theme/*/
     
  2. PunPun

    PunPun VIP Кинотрафик v2

    Messages:
    7,433
    Likes Received:
    3,687
    Best Answers:
    32
     
    • Нравится Нравится x 2
  3. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Ха, а конченые всё не угомонятся :)
     
  4. wawe

    wawe PRO Users

    Messages:
    3,557
    Likes Received:
    802
    Best Answers:
    6
    Кривые руки и отсутствие мозгов, у СЕО гуру.
     
    • Нравится Нравится x 1
  5. anime

    anime Бывалый

    Messages:
    240
    Likes Received:
    55
    Best Answers:
    1
    Не знаю какой у этой CMS url категорий, но возможно вот эта строчка мешает Disallow: /catalog/
     
  6. synlivcho

    synlivcho PRO Users

    Messages:
    749
    Likes Received:
    70
    Best Answers:
    2
    В самом вопросе был, ответ. Тс в роботс выставляет: Disallow: /catalog/ , потом пишет "ПС не могут проиндексировать страницы, страницы категорий" .

    Я под утро смотрел, пост сначала думал не буду не чего писать, может что то не догнал :D
     
    • Нравится Нравится x 1
  7. wawe

    wawe PRO Users

    Messages:
    3,557
    Likes Received:
    802
    Best Answers:
    6
    Тс просто мазахист, кайфует когда в него кидают ссаными тапками за его тупые действия.
    При том что он ещё и занимается продажей сео услуг.
    А потом орёт что все кругом да...бы, а он красавчик.
     
    • Нравится Нравится x 1
  8. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Увы, но ТС в роботс ничего не выставлял, просто скопировал рекомендованый с форума самой CMS.
    И для тех, кто пытается подъебать, не зная темы - категории размещаются в /catalogS. Так что, мимо, товарищи )) Незачёт :)

    Ну да, однозначно тут есть да...бы. Я даже не буду говорить кто. Они сами догадаются и вот-вот подадут голос ;)
     
    • Смешно Смешно x 1
  9. wawe

    wawe PRO Users

    Messages:
    3,557
    Likes Received:
    802
    Best Answers:
    6
    Ну тут если логически помыслить - ТС тупит или создатель CMS. Третьего не дано.
    Очевидно - не так ли ?

    Вопрос: кто дурак ? :D
    Сектор приз на барабане - приз или супер игра ? Тс ? :rolleyes:
     
    • Нравится Нравится x 1
  10. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Мда... ты - это тупиковый вариант развития.

    Как ты вообще живешь таким долбоёбом?)

    А вот это вообще не твоё.
     
  11. wawe

    wawe PRO Users

    Messages:
    3,557
    Likes Received:
    802
    Best Answers:
    6
    :D А жалобка на что ?
    [​IMG]
    Ответь по существу. Не можешь ? )) Потому-что не способен.
    А херами крыть мозгов не нужно иметь. )) Что собственно ты и подтверждаешь, каждым своим топиком. ))

    Прости конечно - но это диагноз уже. )) ;)
     
    • Согласен Согласен x 1
  12. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Это кто бы говорил )))
    Слушай, ты как в воду смотришь.
     
  13. TopicStarter Overlay
    MIKE_FM

    MIKE_FM Местный

    Messages:
    1,868
    Likes Received:
    284
    Best Answers:
    2
    Всё, вопрос решился и закрыт.
    Клоуны, можете идти отдыхать :)