Dismiss Notice
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

Dle парсер кинопоиска для стола заказов(nodejs)

Discussion in 'Модули DLE' started by iBrm1269, Feb 13, 2016.

13.02.16 в 12:09
iBrm1269
16.03.16 в 11:04
iBrm1269
12
2,396
6
Reply to Thread
  1. TopicStarter Overlay
    iBrm1269

    iBrm1269 Посетитель

    Joined:
    Feb 10, 2016
    Messages:
    60
    Best Answers:
    0
    Ratings:
    +20 / 0 / -0
    Доброго времени суток. Сделал простенький парсер кинопоиска для модуля "Стол заказов". Может кому пригодится)

    За работой модуля можете наблюдать тут пока он все не спарсил :D

    P.S. Модуль сделан для того, что бы самому не искать базу фильмов. Он соберет основной список и вы уже из стола заказов можете сами добавлять в базу.

    Может быть попозже выкину допиленный модуль, который сразу в посты добавляет, как "Не опубликовано" и вам останется только добавить ссылку на трейлер и видео.


    P.S. Не ложите в папку с DLE, как это судя по всему хотел сделать прошлый оратор.

    Использование:

    Linux:
    1. Скачиваете архив.
    2. Скачиваете nodejs
    3. Данные их архива ложите на VDS например в папку ~/node/
    4. Заходите в папку, используя команду cd ~/node/
    5. Выполняете команду npm install
    6. Выполняете команду node kp.js(либо если установлен forever использовать команду forever start --uid="kp" -l="kp.log" -a="kp.js"

    Для Windows:
    1. Скачиваете архив.
    2. Скачиваете nodejs
    3. Данные из архива ложите в нужную вам папку
    4. Открываете командную строку из нужной вам папки
    5. Исполняете команду npm install
    6. Исполняете команду node kp.js

    За сутки выполняется 162,000 запросов(округлил в меньшую сторону)


    Скачать с Dropbox

    Ссылка для параноиков
     

    Attached Files:

    #1 iBrm1269, Feb 13, 2016
    Last edited: Feb 14, 2016
    • Нравится Нравится x 6
  2. XNTPbIY

    XNTPbIY Новичок

    Joined:
    Feb 6, 2016
    Messages:
    49
    Best Answers:
    0
    Ratings:
    +6 / 0 / -0
    Не совсем понял суть, и нет информации что куда и зачем.
     
    #2 XNTPbIY, Feb 13, 2016
  3. PunPun

    PunPun
    VIP Кинотрафик v2

    Joined:
    Jun 11, 2015
    Messages:
    7,433
    Best Answers:
    32
    Ratings:
    +4,062 / 137 / -0
    воу воу воу воу. в открытом доступе показывать данные соединения с базой, да вы батюшка бог безопасности, небось икону еще вставили туда.

    используете на свой страх и риск, данные можно получить без проблем, и тогда ваши сайты будут бекапнуты
     
    #3 PunPun, Feb 13, 2016
    • Нравится Нравится x 1
  4. TopicStarter Overlay
    iBrm1269

    iBrm1269 Посетитель

    Joined:
    Feb 10, 2016
    Messages:
    60
    Best Answers:
    0
    Ratings:
    +20 / 0 / -0
    Вытащить данные из приложения, которое не прослушивается не на каком порту? Да вы бог суждения Это вам не PHP скрипт. Так-что прежде, чем умничать узнали бы как работает nodejs. из него не вытащить данные никак, если нет callback'a на это, которого собственно и нет. и повторюсь еще раз. Приложение не использует НИКАКОЙ порт
     
    #4 iBrm1269, Feb 13, 2016
  5. TopicStarter Overlay
    iBrm1269

    iBrm1269 Посетитель

    Joined:
    Feb 10, 2016
    Messages:
    60
    Best Answers:
    0
    Ratings:
    +20 / 0 / -0
    P.S. Не ложите в папку с DLE, как это судя по всему хотел сделать прошлый оратор.

    Использование:
    1. Скачиваете архив.
    2. Скачиваете nodejs
    3. Данные их архива ложите на VDS например в папку ~/node/
    4. Заходите в папку, используя команду cd ~/node/
    5. Выполняете команду npm install
    6. Выполняете команду node kp.js(либо если установлен forever использовать команду forever start --uid="kp" -l="kp.log" -a="kp.js"

    Для Windows:
    1. Скачиваете архив.
    2. Скачиваете nodejs
    3. Данные из архива ложите в нужную вам папку
    4. Открываете командную строку из нужной вам папки
    5. Исполняете команду npm install
    6. Исполняете команду node kp.js
     
    #5 iBrm1269, Feb 13, 2016
  6. PunPun

    PunPun
    VIP Кинотрафик v2

    Joined:
    Jun 11, 2015
    Messages:
    7,433
    Best Answers:
    32
    Ratings:
    +4,062 / 137 / -0
    нихуясине досмотрел что на nodejs, приношу извинения.
     
    #6 PunPun, Feb 13, 2016
  7. nylmen

    nylmen
    Staff Member VIP Кинотрафик v2

    Joined:
    Nov 2, 2015
    Messages:
    2,569
    Best Answers:
    0
    Ratings:
    +702 / 2 / -0
    Не у ловил полезности. С такой системой инсталляции пристрелица можно.
     
    #7 nylmen, Feb 14, 2016
  8. TopicStarter Overlay
    iBrm1269

    iBrm1269 Посетитель

    Joined:
    Feb 10, 2016
    Messages:
    60
    Best Answers:
    0
    Ratings:
    +20 / 0 / -0
    Любой модуль nodejs так устанавливается на любую ОС. Это особенность серверного js и его интерпретации
     
    #8 iBrm1269, Feb 14, 2016
  9. XNTPbIY

    XNTPbIY Новичок

    Joined:
    Feb 6, 2016
    Messages:
    49
    Best Answers:
    0
    Ratings:
    +6 / 0 / -0
    Можно еще разеснения, посмотрел я на файлы и не понял а куда с парсенное сохроняется и гед вывод результата ?
    Как я понял принцип, он спарсил имея доступ к базе он туда залил и при этом это выводится в стол заказов ?
    И как остановить потом работу скрипта ?
     
    #9 XNTPbIY, Mar 16, 2016
  10. XNTPbIY

    XNTPbIY Новичок

    Joined:
    Feb 6, 2016
    Messages:
    49
    Best Answers:
    0
    Ratings:
    +6 / 0 / -0
    У меня на centoce не ставится командой npm install ( yum npm install ).
    4 пункт и 5 пункт не получилось сделать.
     
    #10 XNTPbIY, Mar 16, 2016
  11. Keiskar

    Keiskar
    Забанен

    Joined:
    Jul 2, 2015
    Messages:
    855
    Best Answers:
    0
    Ratings:
    +386 / 0 / -0
    Code:
    wget https://nodejs.org/dist/v4.4.0/node-v4.4.0.tar.gz
tar xzvf node-v* && cd node-v*
yum install gcc gcc-c++
./configure
make
make install
     
    #11 Keiskar, Mar 16, 2016
  12. XNTPbIY

    XNTPbIY Новичок

    Joined:
    Feb 6, 2016
    Messages:
    49
    Best Answers:
    0
    Ratings:
    +6 / 0 / -0
    При команде

    Code:
    [root@km node]# yum npm install
Loaded plugins: fastestmirror
No such command: npm. Please use /usr/bin/yum --help
    Хотя все что выше было yum install gcc gcc-c++ поставилось и скомпилировалось
    Так же все сделал что описано в этой статье http://centos.name/?page/howto/FastestMirror

    Тоже выдает сообщение что и ранее.
     
    #12 XNTPbIY, Mar 16, 2016
    Last edited: Mar 16, 2016
  13. TopicStarter Overlay
    iBrm1269

    iBrm1269 Посетитель

    Joined:
    Feb 10, 2016
    Messages:
    60
    Best Answers:
    0
    Ratings:
    +20 / 0 / -0
    NodeJS v5+
     
    #13 iBrm1269, Mar 16, 2016
(You must log in or sign up to post here.)
Similar Threads
  1. Serhii

    Парсер кинопоиска 5

    Serhii, Nov 10, 2015, in forum: Вопросы- ответы
    Replies:
    2
    Views:
    2,895
    Tegay
    Nov 10, 2015
  2. Алексей23071986

    Парсер кинопоиска

    Алексей23071986, Feb 21, 2017, in forum: Плееры для кино сайтов
    Replies:
    10
    Views:
    2,970
    igrovik
    Mar 4, 2017
  3. Frosty

    Парсер кинопоиска

    Frosty, Apr 30, 2017, in forum: Прочее
    Replies:
    7
    Views:
    2,846
    sobakatochkaru
    May 2, 2017
  4. Alexey.d

    Ищу парсер кинопоиска

    Alexey.d, Nov 5, 2019, in forum: Свободное общение
    Replies:
    6
    Views:
    977
    Alexey.d
    Mar 9, 2020
  5. Lolpron

    Где брать торренты для "стола заказов"?

    Lolpron, Feb 20, 2022, in forum: Свободное общение
    Replies:
    0
    Views:
    285
    Lolpron
    Feb 20, 2022
Loading...
Toggle Width
Style
Zerocool-New
Language
English (US)
Яндекс.Метрика