Скрыть объявление
ВАШИ ПРАВА ОГРАНИЧЕНЫ!

Зарегистрируйтесь на форуме, чтобы стать полноценным участником сообщества!

A-parser 1.1 - продвинутый парсер поисковых систем, suggest, pr, dmoz, whois, etc

Тема в разделе "Полезный софт", создана пользователем A-Parser Support, 12 янв 2017.

12.01.17 в 14:37
07.04.25 в 20:18
251
36.147
1
  1. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник рецептов #59: дни рождения из FB в Google Calendar, парсер Checktrust и Yahoo Finance

    59-й сборник рецептов, в котором собраны парсер для экспорта дней рождений друзей в Google календарь; парсер сервиса проверки качества сайтов Checktrust; парсер Yahoo Finance.

    Экспорт дней рождений из Facebook в Google календарь
    Данный парсер позволяет спарсить список дней рождения своих друзей на Facebook и сгенерировать файл, готовый для импорта в Google Calendar.
    [​IMG]

    Yahoo Finance
    Yahoo Finance - фондовый рынок в реальном времени, котировки.
    [​IMG]

    Парсер checktrust.ru
    Парсер сервиса проверки качества сайтов Checktrust. Позволяет собрать все возвращаемые показатели, для примера реализован вывод данных в 3-х различных форматах.
    [​IMG]


    Еще больше различных рецептов в нашем Каталоге!

    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов


    [​IMG] [​IMG]
     
  2. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Видео урок: Поиск статей внутри сайта

    Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан способ поиска статей внутри сайта с использованием 2-х встроенных парсеров.


    View: https://youtu.be/cezrDb4T3cE


    Плейлист со всеми видео уроками от DIM STUDIO

    Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

    [​IMG]

    [​IMG]
     
  3. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обновленные пресеты в каталоге A-Parser

    Обновление пресетов в Каталоге примеров A-Parser

    Валидатор емайлов
    Проверка существования e-mail адресов
    • Добавлена поддержка protonmail (proton.me, protonmail.com)
    • Добавлена поддержка tutanota (tutanota.com, tutanota.de, tutamail.com, tuta.io, keemail.me)
    • Парсер переписан на JS API v2
    JS::Yandex::LangDetect
    Определение языка страницы через Яндекс Переводчик
    • Парсер переписан на JS API v2 (TypeScript)
    • Добавлена поддержка каптч (наследуется от [​IMG] SE::Yandex)
    • Добавлен выбор пресета настроек [​IMG] HTML::TextExtractor
    • Адаптация к изменениям на источнике
    JS::Yandex::LangDetect::Key
    Определение языка ключевого слова через Яндекс Переводчик
    • Парсер переписан на JS API v2 (TypeScript)
    • Парсер наследует JS::Yandex::LangDetect
    Core Web Vitals
    Отчет о скорости сайта
    • Обновление в связи с изменениями в выдаче
    Еще больше различных парсеров и пресетов в нашем Каталоге!
    Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!


    [​IMG]

    [​IMG]
     
  4. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    1.2.2106 - обновленный SE::Rambler, лимит при парсинге в глубину в LinkExtractor и другие улучшения

    [​IMG]

    Улучшения
    • В [​IMG] HTML::LinkExtractor добавлена возможность указания лимита количества ссылок при парсинге в глубину
    • В [​IMG] Util::AntiGate добавлена поддержка Capsola, capmonster.cloud
    • В [​IMG] Util::Turnstile добавлена поддержка captcha.guru
    • В [​IMG] Rank::MajesticSEO добавлена возможность указывать собственные юзер-агенты для повышения успешности парсинга
    • В парсерах Rank::Ahrefs::* добавлена экспериментальная опция Do not search for sitekey, которая отключает поиск sitekey, что в свою очередь ускоряет запуск задания
    • [​IMG] SE::Rambler полностью переписан:
      • обновлен список языков
      • добавлена возможность указывать регион
      • добавлен выбор десктопной или мобильной выдачи
      • обновлена работа с каптчами
    • JS парсеры: добавлена поддержка тегов для сессий
    Исправления в связи с изменениями в выдаче
    Исправления
    • Исправлены ошибка в [​IMG] Rank::CMS, из-за которой в некоторых случаях он не работал
    • Исправлена ошибка использования [​IMG] SE::Yahoo через Redis API
    • Исправлена работа [​IMG] SE::YouTube при запросах из JS парсеров
    • Исправлена работа [​IMG] Net::Whois с доменами .se
    • Исправлено ошибочное определение запроса неудачным в [​IMG] Shop::eBay
    • Исправлено заполнение результатов в [​IMG] Rank::KeysSo

    [​IMG] [​IMG]
     
  5. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник рецептов #60: товары на Walmart, проверка e-mail и доступность доменов

    60-й сборник рецептов, в котором подобраны: парсер товаров Walmart, парсер для проверки e-mail и парсер для проверки доступности доменов через сервис Pananames

    Парсер товаров walmart.com
    Сбор товаров по ключевым словам на торговой площадке walmart.com с возможностью задать количество страниц результатов и выводом результатов в CSV таблицу
    [​IMG]

    Парсер для проверки e-mail
    Парсер для проверки адресов электронных почт на валидность, доставляемость и прочие параметры через сервис Email Verification API
    [​IMG]

    Pananames - доступность, цена домена
    Парсер, позволяющий проверить доступен ли домен и его цену с использованием сервиса Pananames
    [​IMG]


    Еще больше различных рецептов в нашем Каталоге!
    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов

    [​IMG] [​IMG]
     
  6. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обновленные пресеты в каталоге A-Parser + новый парсер тегов из сервиса Rapidtags

    Обновление пресетов в Каталоге примеров A-Parser

    Парсер переводчика Reverso
    Переводчик текста через сервис reverso.net
    • Исправлена ошибка при отсутствующих $examples или $variants
    • Поправлено логирование
    JS::MailValidator
    Проверка существования e-mail адресов
    • Исправлена проверка почт на protonmail
    Сокращатель ссылок
    Парсер для массового сокращения ссылок с возможностью выбирать используемый сервис
    • Удалены неработающие сервисы (cleanuri.com, gotiny.cc, shrtco.de)
    • Добавлено 2 новых сервиса: gg.gg и urlshort.dev
    Парсер тегов для YouTube и TikTok из сервиса Rapidtags
    Новый пример в Каталоге
    : пресет для сбора тегов для YouTube и TikTok из сервиса Rapidtags.io.
    • можно задать тип: YouTube или TikTok
    • в качестве запросов можно использовать ключевые слова или ссылки на видео на Youtube
    Еще больше различных парсеров и пресетов в нашем Каталоге!
    Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!


    [​IMG] [​IMG]
     
  7. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Видео урок: сбор контактов организаций из Google Maps

    Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан способ сбора контактов организаций по ключевым словам из заданного участка Google карт.


    View: https://www.youtube.com/embed/zygCyYjHg4g


    Плейлист со всеми видео уроками от DIM STUDIO

    Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

    [​IMG] [​IMG]
     
  8. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    1.2.2148 - бесплатное решение Яндекс каптчи, 3 новых парсера, поддержка нового WordStat

    [​IMG]

    Улучшения
    • Открыто бесплатное тестирование решения Яндекс каптчи!
      В [​IMG]Util::AntiGate добавлен провайдер A-Parser.Captchas, его можно использовать без указания ключа доступа.
    • Добавлено 3 новых парсера:
    • В [​IMG]SE::Yandex::WordStat добавлена поддержка нового WordStat
    • В [​IMG] SE::Yandex::SQI добавлен сбор рейтинга магазина в поиске по товарам и рейтинга магазина на Яндекс Маркете
    • В [​IMG] Social::Instagram::profile добавлен сбор ссылок, которые были прикреплены в профиле и сбор телефонов из bio
    • В [​IMG] Maps::Yandex добавлен сбор времени работы организации
    • [​IMG] Util::AntiGate адаптирован к изменениям в API 2captcha/rucaptcha. А также оптимизирована работа с click каптчей и добавлена опция Log captcha images, позволяющая отключать вывод картинок каптч в лог
    Исправления в связи с изменениями в выдаче
    Исправления
    • Исправлена ошибка обработки некоторых HTML сущностей в [​IMG] HTML::TextExtractor
    • Исправлено определение Yandex.Metrika в [​IMG] Rank::CMS
    • Исправлена работа некоторых опций в [​IMG] SE::Startpage
    Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
    График работы поддержки на праздники


    [​IMG] [​IMG]
     
  9. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник рецептов #61: сбор характеристик сайтов, парсер архива Telegram ботов и парсер Lalafo

    61-й сборник рецептов, в котором содержатся: парсер для сбора характеристик сайтов, парсер архива телеграм ботов и парсер объявлений из Lalafo.

    Анализ сайта с помощью be1.ru
    Парсер для сбора характеристик сайтов из сервиса be1.ru. Сервис предоставляет отчет по около 60-ти характеристикам.
    [​IMG]

    Парсер архива Телеграм ботов
    Парсинг информации о Telegram ботах из сервиса BOTSARCHIVE. Для парсинга используется официальное API.
    [​IMG]

    Парсер объявлений сайта Lalafo
    Парсер крупнейшего сайта для размещения бесплатных объявлений Lalafo по поисковому (ключевому) запросу. Возможности: сбор номеров телефонов с объявлений, выбор количества страниц результатов, выбор домена, сбор результатов сразу в CSV таблицу.
    [​IMG]

    Еще больше различных рецептов в нашем Каталоге!
    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов


    [​IMG] [​IMG]
     
  10. Балканский внук

    Регистрация:
    16 апр 2022
    Сообщения:
    18
    Лучших ответов:
    0
    Рейтинги:
    +2 / 0 / -0
    Пользуюсь а Парсером больше года, мне он значительно облегчает рутину в плане поиска дропов и базы для проставления ссылок
    Для Тру Пирата возможно будет полезны пресеты чека на РКН, мониторинг индексации страниц в ПС и чека позиций.

    Нужно потратить некоторое время на освоение софта, мне как новичку было тяжеловато, но ТП выручала, да и руководство пользователя в картинках))
     
  11. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник статей #17: поиск и привлечение аудитории в Instagram, сбор баз сайтов на заданных движках

    Представляем 17-й сборник статей, в который вошли статья о поиске и привлечении целевой аудитории в Instagram и статья о сборе баз сайтов на определенных движках.

    Instagram - сбор пользователей, автоматическая отправка сообщений собранным пользователям в direct
    В статье рассмотрен сбор целевой аудитории и привлечение её в наш инстаграм магазин с помощью автоматической рассылки в Direct.
    [​IMG]

    Как спарсить WordPress сайты (и не только) через A-Parser
    В этой статье показано как собрать сайты на движке WordPress через A-Parser с минимальным количеством мусора в виде других движков. Кроме того данный подход можно использовать для сбора баз на любых движках.
    [​IMG]

    Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники статей


    [​IMG] [​IMG]
     
  12. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обновленные пресеты в каталоге A-Parser

    Обновление пресетов в Каталоге примеров A-Parser

    Скриншоты выдачи поисковой системы
    Демонстрация возможности делать скриншоты страниц, получаемых другими парсерами
    • Добавлена возможность выбирать из нескольких поисковиков (Google/Яндекс/Bing, по аналогии можно добавить остальные)
    • Все результаты, получаемые от парсера поисковика, теперь перемещены в объект $p1.results (для примера реализован вывод $serp)
    • Небольшие изменения логики работы

    Парсер изображений с Flickr
    Парсинг картинок из Flickr по ключевому слову
    • Пресет переделан в JS парсер на TypeScript
    • Добавлен выбор параметров поиска: Sort, License, Color, Style
    • Добавлен параметр выбора количества страниц
    • Для каждой картинки реализована возможность парсить ссылку, заголовок, описание, владельца, количество добавлений в избранное и количество комментариев

    Анализ скорости загрузки и юзабилити сайтов
    Измерение скорости загрузки страниц, их юзабилити, получение скриншотов сайтов
    • Парсер переписан на JS API v2 (TypeScript)
    • Добавлена возможность указывать ключ API
    • Адаптация к изменениям на источнике

    NeuralWriter - перефразирование, генератор промптов, резюмирование
    Парсер сервиса neuralwriter.com
    • Добавлена поддержка разгадывания каптчи Cloudflare Turnstile - опция Util::Turnstile preset. Разгадывание капчи теперь обязательно, если тип запроса не Prompt Generator

    Google Indexing API
    Добавление или удаление страниц сайта в Google Indexing API
    • Парсер переписан на TypeScript (JavaScript API v2)
    • Добавлена возможность использовать несколько ключей

    Генерация картинок ruDALL-E
    Напишите текстовый запрос — получите сгенерированную ИИ картинку в rudalle.ru
    • Исправлена генерация с помощью старой модели (ruDALL-E Malevich)
    • Для генерации картинки старой моделью теперь не требуется подключение Util::AntiGate
    • Добавлен выбор модели, которая будет генерировать изображения, добавлена новая модель Kandinsky 3.0 (new)
    • В моделе Kandinsky 3.0 есть возможность выбрать стиль генерации изображения, доступны все стили
    Еще больше различных парсеров и пресетов в нашем Каталоге!
    Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!


    [​IMG] [​IMG]
     
  13. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Premium прокси от A-Parser

    [​IMG]
    Мы рады представить вам новые Premium прокси-серверы, которые значительно улучшат вашу работу. Ключевые преимущества Premium прокси:
    • База более 10 миллионов резидентных (домашних) IP адресов: Обеспечьте себе разнообразие и стабильность соединения с нашей обширной базой IP адресов.
    • Быстрое время отклика: Мы гарантируем высокую скорость и оптимальное время отклика, обеспечивая эффективную работу ваших парсеров.
    • Гибкая фильтрация по странам и городам: Настройте прокси под свои потребности с помощью гибкой фильтрации, чтобы получать доступ к ресурсам из конкретных стран и городов.
    • Настройки ротации: Используйте различные режимы ротации, включая случайный IP на каждый запрос, ротацию от 1 до 60 минут и режим Sticky, который сохраняет IP на максимально возможное время.
    • Подходит для браузинга и парсинга: Наши прокси идеально подходят как для браузинга, так и для парсинга, с минимальным риском CAPTCHA и банов.
    • Доступ к прокси осуществляется по логину/паролю и протоколу SOCKS5, а также может быть организован сразу с нескольких компьютеров и серверов.
    Лучшие цены на рынке: Premium прокси от $1 за гигабайт трафика.

    Для всех пользователей A-Parser доступен бесплатный триал в Личном кабинете на 1 Гб.

    [​IMG] [​IMG]
     
  14. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    1.2.2228 - 2 новых парсера, множество улучшений и исправлений

    [​IMG]

    Улучшения
    • Добавлен парсер геолокации IP/домена - [​IMG] IP::Geo
    • Добавлен парсер для разгадывания RotateCaptcha - [​IMG] Util::RotateCaptcha
    • В [​IMG] SE::Yandex добавлен параметр Serp time
    • В парсерах [​IMG] OpenAI::Completions и [​IMG] OpenAI::ChatGPT обновлены модели
    • В парсеры SE::Google::KeywordPlanner::* добавлен флаг, указывающий на точность данных
    • В [​IMG] SecurityTrails::IP добавлена возможность парсинга с авторизацией
    • В [​IMG] Shop::Aliexpress добавлена возможность парсить старую цену и валюту
    • В [​IMG] SE::Youtube::Video добавлена возможность собирать данные о Shorts
    • Добавлено информационное сообщение при ошибке импорта JS парсера
    Исправления в связи с изменениями в выдаче
    Исправления
    • Исправлена логика работы [​IMG] SE:: Dogpile
    • Исправлена работа [​IMG] Maps::Yandex с разгадыванием каптч
    • Исправлена проблема с интерфейсом при сохранении региона в [​IMG] SE::Yandex
    • [​IMG] SE::YouTube - устранено игнорирование рязрядов в $views при Device = Mobile
    • [​IMG] Shop::Ebay - исправлены ошибки в парсинге цифровых значений
    • Shop::Aliexpress - исправлены ошибки парсинга $shipping_price и $sold_count
    • Исправлена работа tools.task.id в формате результата
    • Исправлена ошибочная возможность перезаписать default пресет настроек
    • Исправлена проблема зависания регулярных выражений в Parse custom result
    • Исправлена ошибка вызова Social::TikTok:: Profile в JS парсере

    [​IMG]

    [​IMG]
     
  15. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обзор Premium Proxy от A-Parser (скорость, выбор локации, браузинг)

    В данном видео продемонстрирована настройка и скорость работы новых Premium прокси. Данные прокси вы можете использовать как в A-Parser, так и в браузере или в любом другом SEO-софте.


    View: https://youtu.be/YE03ehTYGFQ


    Плейлист со всеми видео уроками от DIM STUDIO

    Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

    [​IMG] [​IMG]
     
  16. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник рецептов #62: проверка текстов, Markdown разметка, простой файловый сервер на базе A-Parser

    62-й сборник рецептов, в котором содержатся: парсер сервиса zerogpt для проверки текстов, пример использования Markdown разметки для генерации HTML страниц и альтернативный метод получения файлов результатов работы А-Парсера.

    ZeroGPT - проверка грамматики и орфографии, детектор искусственного интеллекта
    Парсер сервиса zerogpt.com. Поддерживается выбор режима работы с текстом: проверка грамматики и орфографии или детект искусственного интеллекта, т.е. был ли проверяемый текст сгенерирован с помощью ИИ.

    [​IMG]

    Парсер перевода Markdown разметки в HTML
    Парсер собирает выдачу Google встроенным парсером. Далее, используя заготовленный Markdown шаблон template.md, который можно легко редактировать по своему усмотрению, переводит Markdown разметку в HTML с учетом собранных результатов.

    [​IMG]

    Альтернативный метод получения файлов результатов
    Реализация простого файлового сервера на базе A-Parser. Суть примера заключается в том, чтобы по запросу на заранее известный url получить любой файл из папки results.
    В качестве кейсов применения можно рассматривать любые задачи, в которых требуется получать прямой доступ к файлам результатов и при этом имена файлов заранее известны. Например: с помощью Планировщика периодически запускаются несколько заданий, которые пишут результаты в файлы со статическими именами. И с помощью данного пресета можно легко и в любое время получить эти файлы.


    Еще больше различных рецептов в нашем Каталоге!
    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов

    [​IMG]

    [​IMG]
     
  17. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обновленные пресеты в каталоге A-Parser

    Обновление пресетов в Каталоге примеров A-Parser

    Парсер корейского поисковика Daum.net
    Парсер собирает данные (ссылки, анкоры, сниппеты и связанные ключевые слова) из поисковой выдачи корейской поисковой системы daum.net.
    • Парсер переписан на TypeScript (JS APIv2)
    • Обновлены регулярные выражения, исправлена работа в целом
    • Убран totalcount, т.е. его больше нету в выдаче
    Парсер BuiltWith.com. История IP-адресов и взаимосвязи
    Сбор истории IP-адресов по домену и других веб-сайтов, которые имеют общие IP-адреса с искомым доменом.
    • Убрана опция разгадывания капчи, т.к. теперь данные видны после авторизации и капчи там не видно
    • Добавлена авторизация по логину и паролю
    Анализ ключевых слов на seranking.com
    Парсер для анализа ключевых слов с помощью сервиса seranking.com. Собираемые данные: частотность, стоимость клика, конкуренция, сложность, списки похожих ключевых слов, связанных ключевых слов, вопросов и ссылок органического трафика. В настройках доступен выбор источника (страна и поисковая система).
    • Исправлена работа с каптчей
    • Добавлена проверка выбора пресета Util::ReCaptcha2
    • Небольшая оптимизация кода
    Оценка страниц с использованием Lighthouse
    Оценка производительности, доступности и оптимизации веб-страниц с использованием Lighthouse. В качестве источника используется сайт web.dev.
    • Адаптация к изменениям на источнике
    Еще больше различных парсеров и пресетов в нашем Каталоге!
    Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!


    [​IMG]

    [​IMG]
     
  18. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    1.2.2262 - новые опции во встроенных парсерах, адаптация к изменениям на источниках данных

    [​IMG]

    Улучшения
    • В [​IMG] SE::Google:
      • добавлен параметр Empty totalcount is error, детальнее тут
      • добавлен сбор тегов (массив $tags.$i.tag)
    • [​IMG] SE::Yandex - улучшен парсинг сниппета генеративного ответа
    • В парсере [​IMG] OpenAI::ChatGPT обновлены модели и добавлен параметр Another model name
    • В [​IMG] SE::Yandex::WordStat добавлена опция Wordstat 2 parse all table data, детальнее тут
    • В [​IMG] SE::YouTube::Video расширен перечень собираемых данных, детальнее тут
    • В [​IMG] SE::You добавлена возможность задавать кол-во страниц для парсинга ссылок
    • Следующие настройки перенесены из опций в параметры парсера:
      [​IMG] SE::Google: Parse people also ask
      [​IMG] SE::Yandex: Parse Quick answers и Parse generative answer

    Исправления в связи с изменениями в выдаче

    Исправления
    • Исправлена проблема с отображением сохраненных заданий
    • Исправлена работа опции Collect full region в [​IMG] Maps::Google

    [​IMG] [​IMG]
     
  19. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Сборник рецептов #63: конвертация Youtube видео в статьи, парсер Шедеврум, парсер Pinterest Trends

    63-й сборник рецептов, в котором содержатся: парсер для конвертации Youtube видео в полноценные HTML страницы с картинкой и текстовым описанием содержимого видео, парсер картинок из shedevrum.ai и парсер Pinterest Trends.

    Конвертация Youtube видео в HTML страницы
    Пример парсера, который, используя сервисы ИИ, создает полноценные HTML страницы, содержащие тематическую картинку и текст с разметкой, который дублирует содержание видео. На иллюстрации для примера показана статья, сгенерированная по нашему недавнему видео о Premium прокси.
    [​IMG]

    Парсер картинок с Шедеврум с дополнительными данными
    Парсер картинок с дополнительными данными по ключевым словам из сервиса shedevrum.ai. Можно парсить ссылки на картинки, promptы по которым генерировались эти картинки, описание и т.д.
    [​IMG]

    Парсер Pinterest Trends
    Сбор данных о трендах в Pinterest по ключевым словам с возможностью выбора региона и даты. Собираются данные о популярности и демографии ключевого слова, а также связанные ключевые слова и популярные пины.
    [​IMG]


    Еще больше различных рецептов в нашем Каталоге!
    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов


    [​IMG] [​IMG]
     
  20. TopicStarter Overlay
    A-Parser Support

    A-Parser Support Бывалый

    Регистрация:
    12 янв 2017
    Сообщения:
    224
    Лучших ответов:
    0
    Рейтинги:
    +5 / 0 / -0
    Обновленные пресеты в каталоге A-Parser

    Обновление пресетов в Каталоге примеров A-Parser

    Генерация картинок ruDALL-E
    Генерация картинок по текстовым запросам через нейросеть ruDALL-E. Присутствует возможность выбирать модель и стиль генерации.
    • Добавлена опция Save image, позволяет отключить сохранение изображения в файл, по-умолчанию включена
    • Изображение теперь доступно в переменной $data
    Парсинг отзывов Google Play Market
    Данный парсер собирает комментарии (ссылка на аватар, рейтинг и имя юзера, а также текст отзыва) к приложению в Google Play Market.
    • Исправлен парсинг
    • Парсер переписан на TS (API v2)
    • Добавлена возможность указания количества страниц парсинга
    Naver Ads
    Парсер рекламных объявлений из Naver по ключевым словам с возможностью указать количество страниц парсинга.
    • Исправлен сбор всех результатов
    • Адаптация к изменениям на источнике
    JS::TextFromSE
    Объединение парсера поисковой выдачи и парсера текста в одном JS парсере на примере решения задачи по парсингу текстов.
    • Парсер переписан на TypeScript API v2
    Парсер Aliexpress товаров
    Парсер, позволяющий получить информацию о товаре на Aliexpress, подавая на запрос ссылку на товар.
    • Адаптация к изменениям на источнике
    • $delivery теперь массив
    • $formattedQuery был удален
    • Вместо $html исходный код страницы сохраняется в $data
    Еще больше различных парсеров и пресетов в нашем Каталоге!
    Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

    [​IMG]

    [​IMG]
     
Яндекс.Метрика