Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Как получить список id всех фильмов определённого жанра с кинопоиска?

Тема в разделе "Свободное общение", создана пользователем DLEPlugins, 2 мар 2016.

02.03.16 в 09:40
09.07.18 в 23:20
40
14.288
0
  1. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.403
    Лучших ответов:
    32
    Рейтинги:
    +4.018 / 114 / -0
    Исходный код парсера.
     

    Вложения:

    • Нравится Нравится x 1
  2. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.403
    Лучших ответов:
    32
    Рейтинги:
    +4.018 / 114 / -0
    Кто не понял, то язык C#
     
  3. cosmos

    cosmos Зелёный

    Регистрация:
    11 фев 2016
    Сообщения:
    20
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    А как поставить запятые каждые 6 символов, без пробелов.
     
  4. cosmos

    cosmos Зелёный

    Регистрация:
    11 фев 2016
    Сообщения:
    20
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    upd // .. решилось с помощью макроса // ..
     
  5. TopicStarter Overlay
    DLEPlugins

    Кодер

    Регистрация:
    29 ноя 2015
    Сообщения:
    1.608
    Лучших ответов:
    8
    Рейтинги:
    +1.195 / 9 / -0
    Ответив нескольким людям на вопрос, как я id выдергивал, решил написать статью об этом.
    Вот видео

    Вот сама статья
     
    • Нравится Нравится x 2
  6. gorod48

    gorod48 Зелёный

    Регистрация:
    29 янв 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
  7. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.403
    Лучших ответов:
    32
    Рейтинги:
    +4.018 / 114 / -0
  8. gorod48

    gorod48 Зелёный

    Регистрация:
    29 янв 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    А почему ваша программа не открывается а удаляется антивирусом сразу?
     
  9. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.403
    Лучших ответов:
    32
    Рейтинги:
    +4.018 / 114 / -0
    Потому что там вирус, я собираю ваши данные на свой сервер.
     
    • Нравится Нравится x 1
  10. gorod48

    gorod48 Зелёный

    Регистрация:
    29 янв 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    ну так и знали , значит удаляю ее . А зачем воруете ?
     
  11. PunPun

    VIP Кинотрафик v2

    Регистрация:
    11 июн 2015
    Сообщения:
    7.403
    Лучших ответов:
    32
    Рейтинги:
    +4.018 / 114 / -0
    фсб сдаю
     
  12. KinoshkaLife

    KinoshkaLife Зелёный

    Регистрация:
    23 июн 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    Данный парсер не парсит все ID в категории, он парсит только первые 100, а потом начинает их просто повторять по количеству фильмов в данной категории.
    Я не знаю когда создавался парсер и пример к нему, но в примере нет ни одного повтора, то есть там спарсены все 3000 аниме без повторений.

    Сейчас же, я вставлял даже ту ссылку которая написана как пример и в ней при парсинге парсятся только 100 первых, а потом они повторяются до истечения 3000.

    То есть, в категории, например 10 000 фильмов, я вставляю ссылку в парсер он начинает работать, а в конце получается результат:
    10 000 строк, но уникальных в них, только 100, то есть каждые последующие 100 строк, это просто повторы первой сотни. Можете исправить данную ситуацию?
     
  13. TopicStarter Overlay
    DLEPlugins

    Кодер

    Регистрация:
    29 ноя 2015
    Сообщения:
    1.608
    Лучших ответов:
    8
    Рейтинги:
    +1.195 / 9 / -0
    Так и было изначально в этой программе. Тестил сразу после ее публикации, после понял что она не рабочая и использовал руки для сбора id
     
  14. KinoshkaLife

    KinoshkaLife Зелёный

    Регистрация:
    23 июн 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    Может поделитесь собранными данными?
     
  15. KinoshkaLife

    KinoshkaLife Зелёный

    Регистрация:
    23 июн 2017
    Сообщения:
    0
    Лучших ответов:
    0
    Рейтинги:
    +0 / 0 / -0
    Вообще, я не понимаю немножко вот этого, зачем так усложнять если нужно всего то ID собирать. Взять сделать просто отправку запроса как пользователь заходит на сайт, дальше идет проверка находящихся на ней данных, например Название, Режиссер и год выхода, если данные есть на странице, значит нужно ее ID забивать в файл и все.
     
  16. TopicStarter Overlay
    DLEPlugins

    Кодер

    Регистрация:
    29 ноя 2015
    Сообщения:
    1.608
    Лучших ответов:
    8
    Рейтинги:
    +1.195 / 9 / -0
    Все не так просто. Нужно открывать исходный код страницы и регулярными выражениями вытягивать список всех id с нужных блоков на сайте, при этом обрезать все лишнее.
     
  17. razrushutel

    razrushutel Посетитель

    Регистрация:
    15 ноя 2015
    Сообщения:
    83
    Лучших ответов:
    1
    Рейтинги:
    +6 / 0 / -0
    Напиши пожалуйста сюда регулярные выражения из видео для нотепад?
     
  18. iCooLER

    Кодер

    Регистрация:
    13 сен 2016
    Сообщения:
    390
    Лучших ответов:
    6
    Рейтинги:
    +320 / 12 / -0
    Видео не смотрел, но чтобы вытащить все ID со страницы нужна такая регулярка: \/film\/([0-9]+)\/ через preg_match_all();
     
    • Нравится Нравится x 1
  19. robox

    robox Зелёный

    Регистрация:
    8 мар 2017
    Сообщения:
    15
    Лучших ответов:
    0
    Рейтинги:
    +8 / 1 / -0
    Продам id всех фильмов,мультфильмов и сериалов с кинопоиска на 09.07.2018 (669762 id)
     
  20. evgfreeman

    VIP Кинотрафик v2

    Регистрация:
    26 апр 2016
    Сообщения:
    3.342
    Лучших ответов:
    7
    Рейтинги:
    +1.518 / 210 / -0
    robox зачем продавать?
    Если там спарсить с php за пару кликов и пару кодов и все
    Бесплатно кому надо)
     
Яндекс.Метрика