Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Кинопоиск как его парсить

Тема в разделе "Аудиты сайтов - оценка функционала, юзабилити", создана пользователем evrekh, 16 мар 2017.

16.03.17 в 19:52
evrekh
18.03.17 в 15:31
wake!up
28
7.003
0
Ответить в теме
Страница 1 из 2
  1. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    Скажу сразу что у меня нет модуля DLE, и если често мне кажется нет смысла(если только ради парсинга), т.к весь сайт писал сам от А до Я.
    Друзья всем привет, подскажите пожалуйста парсю kinopoisk.ru, не получается спарсить, т.к кинопоиск меня лочит, хочу сразу сказать что у меня свой парсер datacol

    Выставлял интервал вовремя парсинга, менял проксики и незнаю что сделать еще парсит максимум 40 ссылок, насколько я понял что кинопоиск выставляет капчи.

    если вы предлагаете парсинг и он работает от DLE, просьба подсказать что для этого требуется

    Друзья программисты прошу помочь в данной теме
     
    #1 evrekh, 16 мар 2017
  2. Анна

    Анна
    PRO Users

    Регистрация:
    10 дек 2015
    Сообщения:
    1.041
    Лучших ответов:
    5
    Рейтинги:
    +493 / 14 / -0
    К твоему большому сожалению DLE - это не модуль, он ничего не парсит
     
    #2 Анна, 16 мар 2017
    • Нравится Нравится x 1
  3. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    сам себе придумал геморой а теперь ищешь кто поможет его вылечить )))
    нахрен ты проблемы себе создаешь самописами ? )) ты реально думаешь что это даст тебе какой то плюсик ? )
    немного разочарую, может ты не знал, но киного с трафиком 7.5 млн уников в день работает на ДЛЕ )))
     
    #3 aeneas, 16 мар 2017
    • Нравится Нравится x 1
  4. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    как и где берется парсер? и что для этого нужно?
     
    #4 evrekh, 16 мар 2017
  5. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    и вопрос тут читал на форуме что почти все пользуются этим парсером PKinoPoisk V3.3.0?
    а если покупаю лицензию на DLE парсер там присутствует или его нужно установить??
     
    #5 evrekh, 16 мар 2017
  6. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    берешь дле, активируешь ее кейгеном, ставишь/настраиваешь все нужные модули в том числе парсер и поехало))
    вот еще есть http://parser-kino.ru
    этот более навороченный, так что первым не все пользуются, я предпочитаю больше настроек )
    но они все ток на дле работают
     
    #6 aeneas, 16 мар 2017
  7. Superwanget

    Superwanget
    PRO Users

    Регистрация:
    16 фев 2017
    Сообщения:
    273
    Лучших ответов:
    0
    Рейтинги:
    +41 / 16 / -0
    7,5 миллионов ?!? Серьезно?)
     
    #7 Superwanget, 16 мар 2017
  8. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    #8 aeneas, 16 мар 2017
  9. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    подупал у них траф, 4-5 ляма щас, ошибся чет )
     
    #9 aeneas, 16 мар 2017
  10. Superwanget

    Superwanget
    PRO Users

    Регистрация:
    16 фев 2017
    Сообщения:
    273
    Лучших ответов:
    0
    Рейтинги:
    +41 / 16 / -0
    #10 Superwanget, 16 мар 2017
  11. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    у меня такой вопрос, а как обходит парсер(ДЛЕ) систему кинопоиска? я насколько понял там работает капча и по айпишнику лочит правильно?
    а в ДЛЕ парсере как происходит?
     
    #11 evrekh, 16 мар 2017
  12. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    я просто хочу что бы небыло кота в мешке! мне остается только кинопоиск спасрсить и всё! а у меня не получается((
     
    #12 evrekh, 16 мар 2017
  13. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    задержка 3 секунды там и все гуд
    никаких капчей
    айпишки хз, говорят блочат, но за 9 месяцев моей работы у меня возникали проблемы только когда верстку менял кинопоиск, разрабы обновы тогда выпускают
    а так хз как там все работает, я без понятия, работает и ладно )
     
    #13 aeneas, 16 мар 2017
  14. aeneas

    aeneas
    Забанен

    Регистрация:
    12 мар 2016
    Сообщения:
    11.489
    Лучших ответов:
    10
    Рейтинги:
    +4.044 / 208 / -0
    а новинки ? и кстати - нахуй тебе кинопоиск парсить ? на копипасте говносайт чтоли клепаешь ? )
     
    #14 aeneas, 16 мар 2017
  15. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    спасибо большое! тему пока не закрываю)
     
    #15 evrekh, 16 мар 2017
  16. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    я насколько понял moonwalk дает данные черех xml, и спомошью номера кинопоиска(например 984224), нужно парсить кинопоиск, т.к нет изображения, описания,категорий итд!
    или инфа подругому достется ??
     
    #16 evrekh, 16 мар 2017
  17. yuragan

    yuragan Бывалый

    Регистрация:
    2 фев 2017
    Сообщения:
    396
    Лучших ответов:
    0
    Рейтинги:
    +118 / 1 / -0
    да это ху.ня , чо там два ляма,завтра будет новый день,ну и хуй с ним...
     
    #17 yuragan, 16 мар 2017
  18. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    я насколько понял moonwalk дает данные черех xml, и спомошью номера кинопоиска(например 984224), нужно парсить кинопоиск, т.к нет изображения, описания,категорий итд!
    или инфа подругому достется ??
     
    #18 evrekh, 16 мар 2017
  19. Tony_Montana

    Tony_Montana Посетитель

    Регистрация:
    16 дек 2016
    Сообщения:
    62
    Лучших ответов:
    0
    Рейтинги:
    +39 / 0 / -0
    Как ты написал сам сайт от а до я, если ты собираешься движком DLE парсить кинопоиск?
     
    #19 Tony_Montana, 16 мар 2017
  20. TopicStarter Overlay
    evrekh

    evrekh Зелёный

    Регистрация:
    12 мар 2017
    Сообщения:
    22
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    причем тут это! вопрос заключается в другом
    я насколько понял moonwalk дает данные через xml, и спомошью номера кинопоиска(например 984224), нужно парсить кинопоиск, т.к нет изображения, описания,категорий итд!
    или инфа по другому достется ??
     
    #20 evrekh, 16 мар 2017
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)
Страница 1 из 2
Переключить ширину
Стиль
Zerocool-New
Язык
Russian (RU)
Яндекс.Метрика