Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Вопрос про быстробота

Тема в разделе "Свободное общение", создана пользователем bratec9292, 9 сен 2016.

09.09.16 в 10:11
10.09.16 в 20:32
39
2.445
0
  1. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    Похоже не от этого зависит. У меня заголовки настроены были и не получается такой результат...
    А что вообще убило так это то, что у киноклипса в выдаче стоит появление 12 часов назад, а в этих заголовках указано вот что:
    Last-Modified: Fri, 02 Sep 2016 11:27:15 GMT
     
  2. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    так это постоянные редиректы будут в день пачками появляться, за это ведь можно и по шапке получить
     
  3. Rik

    Rik
    Команда форума VIP Кинотрафик v2

    Регистрация:
    13 май 2016
    Сообщения:
    721
    Лучших ответов:
    0
    Рейтинги:
    +357 / 22 / -0
    Наоборот Last-Modified очень важен, то что он меняется это не есть хороше. У робота есть лимит страниц которые он может обойти. Если на сайте страниц больше чем лимит, то часть страниц не будет индексироваться.
     
  4. Defoz

    PRO Users

    Регистрация:
    10 апр 2016
    Сообщения:
    1.839
    Лучших ответов:
    4
    Рейтинги:
    +257 / 57 / -0
    сайт на укозе :D
     
  5. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    что это за лимит такой? а сайты, у которых по 100к. страниц в индексе, у них лимит какой тогда?
     
  6. yuris

    yuris Местный

    Регистрация:
    21 сен 2015
    Сообщения:
    1.508
    Лучших ответов:
    1
    Рейтинги:
    +620 / 12 / -0
    А куда его там ставить, я вот ставлю в самый верх, но проверка пишет что:
    Last-Modified не найден!
     
  7. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    страницу с фильмом проверяешь или главную? спрашиваю потому как сам затупил и главную проверял)
     
  8. Marques

    PRO Users

    Регистрация:
    12 апр 2015
    Сообщения:
    1.885
    Лучших ответов:
    0
    Рейтинги:
    +693 / 3 / -0
    краулинговый бюджет называется
     
    • Нравится Нравится x 1
  9. Romantv

    Забанен

    Регистрация:
    17 июл 2015
    Сообщения:
    6.989
    Лучших ответов:
    6
    Рейтинги:
    +1.997 / 141 / -0
    на одном сайте работает и на главной на другом только в новости. я не программист помочь не чем тебе не смогу при всем своем желание
    Посмотреть вложение 7775
     
  10. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    Спасибо, почитал. Но мне кажется, что сайтам, у которых закрыт от индексации весь мусор, бояться нечего.
     
  11. Marques

    PRO Users

    Регистрация:
    12 апр 2015
    Сообщения:
    1.885
    Лучших ответов:
    0
    Рейтинги:
    +693 / 3 / -0
  12. yuris

    yuris Местный

    Регистрация:
    21 сен 2015
    Сообщения:
    1.508
    Лучших ответов:
    1
    Рейтинги:
    +620 / 12 / -0
    Та ни там, ни там не найден! Поэтому и спрашиваю, куда его надо вставлять.
     
  13. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    тоже не соображаю в dle, но куда-нибудь туда, где этот код будет виден поисковику в engin.php или main.php
     
  14. Roman.U

    PRO Users

    Регистрация:
    13 ноя 2015
    Сообщения:
    6.629
    Лучших ответов:
    5
    Рейтинги:
    +1.132 / 145 / -0
    Так он просто отложенным орденом обновляет дату, а не сам урл, материал появляетсья на 1 станице уже по заранее выставленной дате. Яндекс видит изменение на странице, заходит бб и опять же кидает в топ материал, так как он думает, что материал недавно добавленный.
    Это же стандартные настройки юкоз.
     
  15. TopicStarter Overlay
    bratec9292

    VIP Кинотрафик v2

    Регистрация:
    3 дек 2015
    Сообщения:
    427
    Лучших ответов:
    0
    Рейтинги:
    +53 / 2 / -0
    В dle тоже есть галочка "текущая дата и время", но она не так работает как надо. тут уже прозвучал правильный ответ, в котором я убедился.
     
  16. Roman.U

    PRO Users

    Регистрация:
    13 ноя 2015
    Сообщения:
    6.629
    Лучших ответов:
    5
    Рейтинги:
    +1.132 / 145 / -0
    А в чем проблема работы даты времени на ДЛЕ? У знакомого ДЛЕ вроде так делал, и кажись работало.
    У самого юкоз, поэтому не знаю как насстроить по другому подобную функцию.
     
  17. yuris

    yuris Местный

    Регистрация:
    21 сен 2015
    Сообщения:
    1.508
    Лучших ответов:
    1
    Рейтинги:
    +620 / 12 / -0
    А в том, что дату и время ты изменяешь, но ПС не индексируют заново и не считают обновленную тему новой. Но если изменить УРЛ, то переиндексирует заново как новый, но это создает кучу дублей и 301 редиректов. А если учесть сколько сериалов и серий каждый день выходит, то за день таким образом можно создать хуеву тучу дублей. А за неделю? А за месяц? Это вообще пиздец!

    Яша конечно удаляет страницы отдающие 301 редирект, но с его скоростью переобхода старых материалов, он тупо не успевает за тобой подчистить выдачу. Ты за неделю меняя урлы, наделаешь порядка 500 редиректов, а то и больше обновляя сезоны и серии, а он блядь животное с десяток всего удалит и так по возрастающей, в итоге в один прекрасный день сайт падает на самое днище из-за туевой кучи дублей и будет лежать пока яша не подчистит все дубли и 301 страницы и не выкинет их из выдачи, а на это у него уходит от 2 до 3 месяцев! И самое главное, не факт, что все эти сериалы вернут свои нормальные позиции и даже потом траф может уже не вернутся на прежний уровень.
     
  18. Roman.U

    PRO Users

    Регистрация:
    13 ноя 2015
    Сообщения:
    6.629
    Лучших ответов:
    5
    Рейтинги:
    +1.132 / 145 / -0
    Ну а как же возраст УРЛ, чем больше возраст тем ценней страница для яндекса. Может дело не в смене УРЛ, а меняется сама страница пагинации, были на странице одни фильмы, потом стали другие, типо так.
     
  19. Smile

    Команда форума VIP Кинотрафик v2

    Регистрация:
    15 июн 2015
    Сообщения:
    358
    Лучших ответов:
    0
    Рейтинги:
    +170 / 0 / -0
    А как тогда получается у топов? допустим есть сериал в яндексе с именем - "Сериал 1 сезон 8 серия", выходит новая серия, обновляется, а в момент выхода сериала яндекс индексирует и в поиске уже моментально - "Сериал 1 сезон 9 серия".
     
  20. Roman.U

    PRO Users

    Регистрация:
    13 ноя 2015
    Сообщения:
    6.629
    Лучших ответов:
    5
    Рейтинги:
    +1.132 / 145 / -0
    Ну не по всему нужно с топ равнятся, они особенные (есть свои мнение, но писать не буду, то наивных много, спорить будут).
    yuris правильно пишет про смену УРЛ, но я как-то страниц урл менял на сайте, для уменьшения вложенности, так 8 месяцев прошло, яндекс не переиндексировал и половины. Писал в тех подджерку, согласились, что много старых страниц, но сказали что рандом роботы заходят на сайт и рандомно страницы пересматривают. Тойсть на хорошую страницу с которой все ок, может раз 20 зайти, а которую нужно переиндексировать может вообще не зайти.
    Поэтому в том и проблема, что сколько не меняй урл (хотя не урл, а тайтл сайта), хер знает когда оно переиндексируетсья.
    На счет дубликатов и мусора, тоже все верно, у меня дофига было мусора, и яшка не спешит его выкидывать, с гуглом все ок. Благо сам загонял своими способами роботов, и сайт стал немного быстрей дублить с индексацией, а то было по 3 дня уник контент не индексировал.
     
    • Нравится Нравится x 2
Похожие темы
  1. Евген
    Ответов:
    44
    Просмотров:
    7.550
  2. pit
    Ответов:
    2
    Просмотров:
    3.532
  3. SunRis3
    Ответов:
    0
    Просмотров:
    3.663
  4. tomy
    Ответов:
    7
    Просмотров:
    3.413
  5. JustCain
    Ответов:
    3
    Просмотров:
    2.680
Загрузка...
Яндекс.Метрика