Обсуждение Закрыть от индексации под домен.

[kartavtsev94]

Здравствуйте форумчане. Подскажите пожалуйста. Решил для балансера сделать на cloudflare под домен вида cdnvideo.название сайта.com. На днях заметил, что в индекс ПС стали попадать ссылки на плеера с этого под домена. Прописал в robots.txt
Disallow: */cdnvideo.название сайта.com/* В яндексе вебмастере проверил должно блокировать с этого адреса, а на самом деле всё наоборот и всё равно попадает в индекс. Подскажите пожалуйста как можно заблокировать индексацию поддомена? В заранее благодарю.

 

[Forian]

Здравствуйте форумчане. Подскажите пожалуйста. Решил для балансера сделать на cloudflare под домен вида cdnvideo.название сайта.com. На днях заметил, что в индекс ПС стали попадать ссылки на плеера с этого под домена. Прописал в robots.txt
Disallow: */cdnvideo.название сайта.com/* В яндексе вебмастере проверил должно блокировать с этого адреса, а на самом деле всё наоборот и всё равно попадает в индекс. Подскажите пожалуйста как можно заблокировать индексацию поддомена? В заранее благодарю.

у поддомена должен быть свой robots.txt
в его директории
и в нём просто
User-Agent: *
Disallow: /


p.s или такой вариант Как в Robots.txt закрыть поддомены от индексации?

 

[Forian]

тут ещё вопрос вот в чём, поддомен направлен на балансер же, будут ли сканировать роботы ПС директорию которая будет у нас.
кстати тоже интересует данная тема, т.к. тоже в клоуде делал запись CNAME

 

[Forian]

кстати роботы скорее всего поддомен индексируют на основном домене, на страницах с фильмами где стоит код плеера
надо в этом случае место кода где плеер обернуть в тег
<noindex></noindex>

 

[kartavtsev94]

у поддомена должен быть свой robots.txt
в его директории
и в нём просто
User-Agent: *
Disallow: /


p.s или такой вариант Как в Robots.txt закрыть поддомены от индексации?

Вот в том то и дело. Что я создал CNAME и просто перенаправляю для VideoCDN балансера. Поэтому у меня robots.txt для него нету. Раньше ПС не индексировали никогда, а сейчас почему-то стали индексировать.

 

[kartavtsev94]

кстати роботы скорее всего поддомен индексируют на основном домене, на страницах с фильмами где стоит код плеера
надо в этом случае место кода где плеер обернуть в тег
<noindex></noindex>

Обернул ещё давно и никакого результата, что гугл, что яндекс индексирует ссылки. А нафиг мне надо добавляю фильм. ПС индексирует страницу с фильмом + ссылку плеера.

 

[devid]

Можно попробовать указать nofollow для iframe.

 

[devid]

Но самое надёжное и верное решение - написать балансеру чтобы он сам указал запрет на индексацию страниц с плеером.

 

[kartavtsev94]

Но самое надёжное и верное решение - написать балансеру чтобы он сам указал запрет на индексацию страниц с плеером.

Спасибо большое. Что-то не подумал об этом. Сейчас попробую им написать.

 

[kartavtsev94]

Всё написал админу балансера. Сказал, что тестировал что-то и открывал индексацию плееров, но что-то пошло не так и сейчас будет снова скрывать. Можно тему зыкрывать. Спасибо всем.