A-Parser - продвинутый парсер поисковых систем, WordStat, YouTube, Suggest, PR, etc

  • Автор темы Автор темы Forbidden
  • Дата начала Дата начала
1.2.1683 - новый парсер Cloudflare::Radar, поддержка сервиса CaptchaAI, исправления ошибок

1.2.1683.png


Улучшения

Исправления в связи с изменениями в выдаче

Исправления
  • Исправлено лишнее использование сессии на последней попытке в
    se-google.png
    SE::Google
  • Исправлен парсинг поисковой выдачи Яндекс, когда в выдаче только 1 результат
  • Исправлена ошибка в
    telegram-groupscraper.png
    Telegram::GroupScraper, из-за которой парсились не все имена и ссылки на логины
  • Исправлен баг в
    se-yandex-position.png
    SE::Yandex:: Position, из-за которого ошибочно осуществлялся поиск по запросу вместе с искомым доменом
  • Исправлена проблема в
    check-roskomnadzor.png
    Check::RosKomNadzor, из-за которой при массовом парсинге иногда не менялась прокси
  • В
    html-linkextractor.png
    HTML::LinkExtractor исправлен сбор внутренних ссылок после редиректа
  • Puppeteer: улучшена работа с сайтами, запрашивающими доступ в модальном диалоге

Черная пятница планируется? :-)
 
Черная пятница планируется? :-)
Если планируется какая либо акция\скидка, то мы озвучиваем это заранее. Так же вы всегда можете уточнить об этом в тех поддержке на сайте
 
Обновленные пресеты в каталоге A-Parser

Парсинг базы фильмов из IMDB
Парсер получает данные о каждом фильме и записывает их в результат: название, дата выхода, рейтинг, рекомендаций к ним и другое

Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool
Получение показателей скорости загрузки сайтов с помощью Chrome UX Report Compare Tool. Используется технология Chrome User Experience Report (CrUX) - это набор данных, отражающий, как реальные пользователи Chrome взаимодействуют с популярными сайтами в Интернете.

Парсер профиля YouTube
Парсинг данных о Youtube канале: дата регистрации, количество просмотров, страна, email из описания (если есть), описание, ссылки

Парсинг istio.com
Парсер для анализа текстов на сервисе istio.com. С его помощью можно определить такие показатели как тошнота, водность, словари, тематика, статистика и т.п. В качестве запросов можно подавать как тексты, так и ссылки на страницы.

Оценка страниц с использованием Lighthouse
Парсер для оценки производительности, доступности и оптимизации веб-страниц с использованием технологии Lighthouse. Lighthouse - это автоматизированный инструмент с открытым исходным кодом для улучшения качества веб-страниц. С помощью данной технологии осуществляется аудит сайта и можно получить такие показатели как производительность, доступность, оценку доступности для поисковых систем и т.д.

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

 
Вношу порцию похвалы софту.
Владею не первый и не второй год, апарсер закрывает все(!) мои потребности в парсинге, анализе и обработке данных.
От банального парсинга выдачи, до сложных 2-х/3-х этапных решений с передачей результатов от одного этапа в другой.
Понятно, что на зенно можно сваять почти что угодно, но "вы не понимаете, это другое" (с)
 
Видео урок: Сбор форм комментариев с помощью A-Parser

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан сбор форм комментариев.


Данный видео урок показывает, как собрать сайты, где можно оставить свой комментарий в форму комментирования статей.

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 
  • Спасибо
Реакции: sydoow
Видео урок: Сбор форм комментариев с помощью A-Parser

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан сбор форм комментариев.


Данный видео урок показывает, как собрать сайты, где можно оставить свой комментарий в форму комментирования статей.

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!


Очень нравятся ваши видео уроки и уроки от ДимСтудио
Жаль что вы перестали публиковать видосы на своём канале, хотя раньше были регулярно
 
Обновленные пресеты в каталоге A-Parser ч.2

Обновление пресетов в Каталоге примеров A-Parser часть 2

Парсинг количества трафика на сайтах

Данный парсер позволяет собирать данные о посещаемости сайтов за день, неделю, месяц, тесты, параметры домена, техническое состояние, внутреннюю оптимизацию.

Сохранение в результатах TOP-3 Google
Пресет сохраняет первые ТОП-3 сниппета выдачи Google.

Парсер Яндекс Кью
Парсер собирает список вопросов по запросам и ответы к ним. Для каждого вопроса, кроме ответа, собираются данные о рейтинге, дате публикации, авторе, просмотрам и т.д.

JS::MailValidator
Проверка существования e-mail адресов. Поддерживаются 9 почтовых сервисов: Gmail, Outlook, Yandex, Rambler, Yahoo, Mail.ru, GMX, AOL, iCloud


Еще больше различных парсеров и пресетов в нашем Каталоге!

Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!



 
1.2.1770 - 3 новых парсера, адаптация существующих парсеров к изменениям, исправления ошибок

1.2.1770.png


Улучшения
  • Добавлены новые парсеры:
    • rank-ahrefs-brokenlinks.png
      Rank::Ahrefs::BrokenLinks - сбор кол-ва и списка (топ10) битых входящих и исходящих ссылок
    • rank-ahrefs-trafficchecker.png
      Rank::Ahrefs::TrafficChecker - оценка трафика, сбор истории трафика и списков ключевых слов, страниц и стран с наибольшим трафиком
    • se-quora.png
      SE::Quora - парсинг поисковой выдачи Quora по ключевому слову с возможностью выбирать тип и время результата
  • Обновлен список регионов в парсерах Яндекс, убраны регионы, на которых поиск больше невозможен. В частности из-за того, что по-умолчанию был выбран регион Россия, парсер работал очень плохо, почти постоянно получая каптчи, т.к. данный регион больше не доступен для выбора в Яндексе. Также оптимизирован поиск региона при выборе в combobox.
  • Улучшена обработка Node-модулей (в некоторых случаях использовалась неверная версия)
  • JS парсеры: this.logger.put и this.logger.debug форматируют вывод аналогично console.log, благодаря чему теперь выводить объекты можно без использования JSON.stringify
Исправления в связи с изменениями в выдаче
Исправления
  • В
    se-yandex.png
    SE::Yandex исправлена ошибка с определением бана на мобильной верстке
  • В
    se-google-translate.png
    SE::Google::Translate теперь headless включен по-умолчанию
  • Исправлена проблема с русскоязычными именами файлов в функции "Запустить по завершению"
Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
График работы поддержки на праздники



 
Видео урок: Ищем продвигаемые ссылки в отчётах (другой софт) c помощью парсера Check::BackLink

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показано, как искать продвигаемые ссылки в отчётах (другой софт) c помощью парсера
check-backlink.png
Check::BackLink


Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!




 
1.2.1794 - поддержка Cloudflare Turnstile, множество исправлений во встроенных парсерах

1.2.1794.png


Улучшения
Исправления в связи с изменениями в выдаче
Исправления
  • Исправлена работа
    se-yandex-byimage.png
    SE::Yandex::ByImage с запросами, содержащими символы кириллицы

 
a-parser крутится :Dденьги мутятся:bu:
 
Кейсы с использованием A-Parser от Ant-Team.ru

Представляем вашему вниманию несколько кейсов от Ant-Team.ru в которых был использован A-Parser.

Что влияет на позиции сайта в Google? Кейс по работе с PBN: растем в 3 раза по трафику и на 345% по позициям

345poziciya_fhsdjfhak.jpg


Статья посвящена опыту продвижения сайта в поисковой системе Google работая с PBN (Private Blog Network). В статье представлена детальная инструкция, рассмотрены трудозатраты и показаны скриншоты по позициям и трафику. Также пошагово описан подход к работе со ссылками, показано как собиралась сетка PBN и какие результаты это принесло.

Понятно, что они пишут в большей степени клиентские кейсы, где технической стороне уделяется не так много внимания. Но всё, что они сделали, основано на А-Парсере. Все дропы, которые они собирают, проверяют и агрегируют у себя в базе для последующей обработки, они получают с помощью нашего парсера.

Рекомендуем ознакомиться со статьей и понять, каких результатов можно достичь, используя A-Parser.


ТОП-10 в Google за 35 дней: опыт работы с PBN и подклейкой доменов

podkleyka_domenov_fhsdjfhjkla.jpg


Еще один интересный кейс, но уже не по аукционникам, а по реальным дропам, которые можно найти с помощью A-Parser.

Здесь описывается опыт работы с PBN и приводятся советы по использованию этого инструмента для создания качественных обратных ссылок на сайт. Также рассказывается о том, как автор использовал подклейку доменов для улучшения авторитета своего сайта и приводятся советы по выбору подходящих доменов. Кроме того приведены примеры использования A-Parser для автоматизации поиска доменов. А-Parser собирает все внешние ссылки с указанного домена и используется для массовой проверки доступности доменов и получения информации о них.

В статье, как обычно, минимум технической информации, но они активно отвечают на вопросы в комментариях. Если интересно, то спрашивайте, как искать подобные дропы и что для этого нужно. А зачем вообще это делать? Ответ очевиден: взять топ Гугла за 35 дней способен не каждый.

Если вы занимаетесь продвижением сайтов и хотите узнать больше о PBN и подклейке доменов, мы рекомендуем вам прочитать данную статью.

 
Курс по PBN от Ant-Team.ru

kursPBN160323.png


Ребята из Ant-Team.ru запустили курс по PBN

Курс полностью основан на A-Parser и разбит на две части: проф. и стандартная.

В профессиональной версии все процессы парсинга полностью автоматизированы и не требуют каких-либо доработок, вплоть до дашбордов с дропами и статистикой по ним.

В стандартной версии Ant-Team научат вас настраивать A-Parser и парсить дропы в ручном режиме.

Набор на курс продлится до 30 марта, но начать обучение можно уже сегодня.

Программа и регистрация по ссылке: https://pbn-course.ru/
 
1.2.1848 - 2 новых парсера, множество улучшений и исправлений во встроенных парсерах

1.2.1848.png


Улучшения
  • Добавлены новые парсеры:
    • se-youtube-video.png
      SE::YouTube::Video - позволяет парсить данные о видео на Youtube (включая субтитры)
    • rank-binganalytics.png
      Rank::BingAnalytics - парсер данных из аналитики Bing в боковой панели Edge
  • В связи с неактуальностью удалены следующие парсеры: Rank::Alexa, Rank::Alexa::API, SE::MailRu, SE::MailRu:: Position
  • Исправлен парсинг вопросов-ответов (PAA) в
    se-google.png
    SE::Google
  • Улучшена обработка 404-го кода ответа в
    rank-keysso.png
    Rank::KeysSo
  • В
    rank-ahrefs-keyworddifficulty.png
    Rank::Ahrefs::KeywordDifficulty в переменные добавлен shortage
  • В
    util-turnstile.png
    Util::Turnstile добавлен провайдер CapSolver
  • Во всех парсерах Ahrefs добавлена опция Turnstile pass proxy, подробнее здесь
  • В парсерах Bukvarix добавлена возможность использовать свой API ключ, дополнительная информация здесь
  • В
    maps-google.png
    Maps::Google добавлена возможность получать ссылку на "Я владелец компании"
  • В
    se-google-keywordplanner.png
    SE::Google::KeywordPlanner добавлена возможность парсить тренды поисковых объёмов, дополнительная информация здесь
  • Обновлен список языков в
    deepl-translator.png
    DeepL::Translator
  • В
    social-instagram-profile.png
    Social::Instagram:: Profile добавлена возможность парсить с авторизацией
  • Улучшено определение наличия кеша в
    se-google-cache.png
    SE::Google::Cache
  • В
    net-whois.png
    Net::Whois добавлен новый метод обработки результатов для некоторых доменных зон
  • Продолжается миграция встроенных парсеров на JS APIv2, в этом релизе переписано 10 парсеров
Исправления в связи с изменениями в выдаче
Исправления
  • Исправлено зависание задания во время повторного запуска
  • Исправлена ошибка с отправкой сообщения о неверно разгаданной каптчи в
    util-antigate.png
    Util::AntiGate
  • В
    coinmarketcap-lastprice.png
    CoinMarketCap::LastPrice был пустой $data
  • rank-ahrefs-keywordgenerator.png
    Rank::Ahrefs::KeywordGenerator не переходил к решению каптчи при определенном формате результата
  • Исправлена ошибка в
    se-yandex-direct-frequency.png
    SE::Yandex:: Direct::Frequency, из-за которой при использовании аккаунтов все запросы были неудачные
  • Исправлен
    seo-ping.png
    SEO:: Ping
  • Исправлено декодирование сущностей в
    rank-moz.png
    Rank::MOZ
  • JS парсеры: исправлен this.utils.urlFromHTML(), не все сущности корректно декодировались




Артур Корсаков запускает мастер-группу по Техническому SEO

Курс состоит из 3х частей:
  • Блок 1
    • Технический аудит сайта,
    • Исследование кода Яндекса,
    • Скрытие ссылок от различных сервисов,
    • Клоакинг для серых ниш.
  • Блок 2
    • Парсинг структуры конкурентов,
    • Работа с Chat GPT,
    • Работа с релевантностью.
  • Блок 3
    • Настройка программы A-Parser,
    • Создание собственных пресетов,
    • Парсинг тематических дропов с ссылками из Википедии,
    • Работа с ссылочным профилем.
Тем, кто присоединится до пятницы, 31 марта (включительно), получат доступ до июля к эксклюзивной бета-версии закрытого инструмента ГАР (Гибридный анализ релевантности).

В которую уже входят следующие функции:
  • Анализ на основе формулы SWBM25 (хитрый BM25 в скользящем окне),
  • Рекомендации по микроразметке,
  • Семантические Коконы.

Старт планируется 3 апреля!

Подробности по ссылке:
https://vk.com/@-213214163-master-gruppa-po-tehnicheskomu-seo-2023

Чтобы присоединиться нужно написать лично Артуру по любому из контактов:
https://artur2k.ru/about/
 
  • Спасибо
Реакции: Alex.A
Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Парсинг поиска ВК

Сбор результатов поиска в социальной сети Вконтакте.
  • Добавлен Check content
  • Адаптация к изменениям на источнике
Получение списка пользователей, которые поставили у заданного объекта отметку «Нравится» в VK
Парсер для парсинга списка пользователей, которые лайкнули пост во Вконтакте.
  • Переделан в JS парсер
  • Адаптация к изменениям на источнике
  • Поддержка фото и видео
  • Поддержка API: вместо куки remixstid теперь следует использовать ваш ключ доступа (access_token)
  • Мелкие правки
Подсказки pornhub
Парсер подсказок сайта для взрослых pornhub.com
  • Переделан в JS парсер
  • Адаптация к изменениям на источнике
Парсер Яндекс Кью
Парсер для сервиса Яндекс Кью, позволяющий собрать списки вопросов и ответов к ним
  • Добавлен парсинг страницы ответов
  • Адаптация к изменениям на источнике
  • Рефакторинг
JS::Chrome::ScreenshotsMaker
Парсер для создания скриншотов сайтов с использованием puppeteer(Chrome)
  • Поддержка pdf формата (возможность сохранять страницы в PDF)
Фильтрация по множеству признаков
Пример фильтрации страниц по большому количеству признаков
  • Парсер переписан на JS APIv2
  • Исправлен баг с дублированием сигнатур
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

 
Сборник рецептов #54: Google Shopping, Циан и парсер новостей с автоматическим переводом

54-й сборник рецептов, в котором представлены парсер Google Shopping, парсер базы недвижимости Циан и парсер новостей с автоматическим переводом контента на указанный язык.

Google Products
Парсер товаров по ключевым словам из выдачи Google Shopping
2zaxe_230414153718.png


Парсер Циан
Парсер результатов поиска (с возможностью задать любые фильтры) на cian.ru
mzhp6_230413144428.png


Парсер новостей inshorts.com с переводом контента
Парсер новостей inshorts.com с переводом контента через переводчик Deepl
2023-04-17-00-57-51.png


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

 
1.2.1886 - обновление компонентов, новые возможности в работе с аккаунтами Яндекса, фиксы парсеров

1.2.1886.png


Улучшения
  • Обновление NodeJS до 18.15, Puppeteer до версии 19.11.0 и Chrome до 112-й версии
  • Добавлен обход CloudFlare в
    net-http.png
    Net::HTTP при Engine = Chrome
  • Добавлены новые возможности в работе с аккаунтами Яндекса:
    • se-yandex-register.png
      SE::Yandex::Register теперь сохраняет использованный прокси и ответ на секретный вопрос
    • se-yandex-wordstat.png
      SE::Yandex::WordStat использует для логина сохраненный прокси и умеет при необходимости отвечать на секретный вопрос
  • В
    se-yandex.png
    SE::Yandex добавлена возможность указывать id региона в обход существующего списка
  • Улучшена работа
    net-dns.png
    NetDNS, добавлена совместимость с некоторыми серверами
  • Улучшен парсинг анкоров беклинков в
    rank-ahrefs.png
    Rank::Ahrefs
Исправления в связи с изменениями в выдаче
Исправления
  • Исправлено использование переменных из Конструктора запросов в Начальном тексте
  • Исправлена работа
    net-whois.png
    Net::Whois с доменами зоны .it, а также исправлено определение незарегистрированных доменов
  • В
    se-yandex-wordstat.png
    SE::Yandex::WordStat исправлена ошибка, из-за которой парсер повторно не авторизовался

 
Сборник рецептов #55: сокращатель ссылок и парсер сервиса статистики и аналитики HypeStat

55-й сборник рецептов, в котором представлены парсер для сокращения ссылок с возможностью выбрать из 6-ти сервисов сокращения и парсер HypeStat - бесплатного сервиса статистики и аналитики.

Сокращатель ссылок
Данный парсер позволяет массово сокращать ссылки. На данный момент поддерживается 6 сервисов сокращения, можно выбрать любой из них, а также присутствует режим случайного выбора.
oe4ez_230523125026.png


Парсер HypeStat
HypeStat - это бесплатный сервис статистики и аналитики, где вы можете найти информацию о каждом веб-сайте. Данный парсер собирает следующие данные: Technologies Summary, Traffic Summary, Traffic Sources, Competitive Data (SEMrush), Reputation Ratings (MyWot.com), DNS Lookup, Whois Lookup.
r22km_230525130002.png


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов



 
парсер супер, чтобы не заблокали юзаю прокси акенет, пасибо разрабам, рил рекомендую
 
1.2.1930 - 3 парсера для AI контента, обход каптчи Turnstile без сервисов, Instagram с авторизацией

1.2.1930.png


Улучшения
Исправления в связи с изменениями в выдаче
Исправления
  • Исправлен обход Cloudflare
  • Исправлена ошибка в
    rank-cms.png
    Rank::CMS, из-за которой не определялись некоторые движки
  • Исправлена работа
    se-yandex-suggest.png
    SE::Yandex::Suggest при выборе 2-го метода
  • Исправлена работа
    net-whois.png
    Net::Whois с некоторыми доменными зонами
  • Исправлен выбор региона в
    se-yandex-direct.png
    SE::YandexDirect
  • JS парсеры: исправлена работа threadDestroy()



photo_2023-06-05_14-55-59.jpg

Ребята из Ant-Team рассказывают про аукционы освобождающихся доменов в РФ: практическое применение на примерах и аналитика.
  • Зачем SEO-специалисты или крупные компании приобретают виртуальную недвижимость.
  • Кто являются вашими конкурентами по аукционам.
  • Какого размера выделять бюджет на аукционы доменов в России.
➡️ Читайте статью по ссылке: https://vc.ru/seo/716986-kto-i-zachem-pokupaet-aukcionnye-domeny

И до 15 июня вы еще можете попасть на второй поток курса по PBN от А до Я: https://pbn-course.ru/.
 
Видео урок: Сокращатель ссылок

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан пример работы с парсером для массового сокращения ссылок.


Оригинальный парсер в Каталоге: https://a-parser.com/resources/455/

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!




Промо от нашего партнера

photo_2023-06-13_11-55-36.jpg


Leadgid — топовая международная финансовая партнёрская сеть.

Найдётся всё, что нужно новичку и профи:
  • выбор из 500+ офферов по 30+ ГЕО
  • личная поддержка для каждого вебмастера
  • бесплатная платформа LeadCore со всеми инструментами
  • регулярные конкурсы с крутыми призами и поездками.
А ещё в Leadgid постоянно проходят разные ивенты, оффлайн-встречи и онлайн-вебинары, обучения, акции и многое другое.

Присоединиться просто — переходи на сайт, регистрируйся и жди волшебное письмо с инструкцией
 
Сборник рецептов #56: Instagram Direct, переводчик Reverso, рекламные объявления из Naver

56-й сборник рецептов, в котором собраны: парсер для рассылки сообщений в Instagram Direct, парсер переводчика Reverso и парсер для сбора рекламных объявлений по ключевым словам из Naver.

Instagram Direct
sgvk6_230620184437.png

Парсер для автоматической отправки сообщений указанным пользователям в Instagram.

Парсер переводчика Reverso
7df25_230626114931.png

Парсер для перевода текстов через сервис reverso.net. Кроме непосредственно перевода на выбранный язык, умеет определять язык исходного текста, собирает варианты перевода, примеры в контексте, а также перефразирования и альтернативные переводы исходного текста.

Naver Ads
2023-05-25-13-50-13.png

Парсер для сбора рекламных объявлений по ключевым словам из Naver. Собирает заголовок, описание, ссылка, сайт и картинку-превью.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

 
1.2.1958 - 5 новых парсеров, улучшения интерфейса, новые опции в существующих парсерах

1.2.1958.png


Улучшения
  • Добавлено 3 новых парсера:
    • deepl-write.png
      DeepL::Write - проверка и редактирование текстов через одноименный сервис
    • reddit-comments.png
      Reddit::Comments - парсер комментариев на Reddit
    • reddit-posts.png
      RedditPosts - парсер сообщений на Reddit
  • SE::Google::KeywordPlanner теперь разделен на 2 независимых парсера:
  • В парсеры KeywordPlanner добавлен параметр authuser, он теперь обязателен при способе авторизации через куки
  • В
    se-google.png
    SE::Google добавлена информация о флагах результатов
  • В
    se-yandex-direct-frequency.png
    SE::YandexDirect::Frequency добавлен обход каптчи для запросов без использования аккаунтов
  • В
    se-google-images.png
    SE::Google::Images добавлена возможность управлять параметром Safe search
  • В
    net-whois.png
    Net::Whois добавлена опция Checking by DNS record, которая проверяет на существование IP по домену
  • Улучшено взаимодействие со всплывающей подсказкой с переменными выбранного парсера:
    • добавлен вывод полного названия выбранного парсера
    • добавлена ссылка на описание выбранного парсера
    • подсказку теперь можно прокручивать
    • данные теперь можно копировать
  • При раскрытии выпадающего меню выбора парсера теперь названия парсеров видно целиком
  • В настройках задания добавлена опция остановки задания при неудачном запросе
  • В настройки потоков добавлена опция Proxy strategy, она позволяет управлять стратегией использования прокси

Исправления в связи с изменениями в выдаче

  • se-google.png
    SE::Google - адаптация к изменениям в верстке
  • Исправлен парсинг related в
    se-yandex.png
    SE::Yandex
  • Исправлен
    cloudflare-radar.png
    Cloudflare::Radar
  • Парсер
    se-quora.png
    SE::Quora адаптирован к изменениям в выдаче
  • Исправлена работа
    net-whois.png
    Net::Whois с некоторыми доменными зонами, а также ряд других ошибок
  • shop-ebay.png
    Shop::eBay
Исправления
  • Исправлено ошибочное заполнение неудачными при паузе/остановке задания
  • Исправлено игнорирование опции Extra query string в
    maps-yandex.png
    Maps::Yandex

 
Сборник рецептов #57: пересылка сообщений из Telegram каналов, скорость сайтов, проверка текстов

57-й сборник рецептов, в котором представлены: парсер для агрегации сообщений из нескольких Telegram каналов в один; парсер для анализа скорости работы сайта; парсер для анализа текстов на предмет их генерации сервисами ИИ.

Автоматическая пересылка сообщений из нескольких Telegram каналов в один
z3v0qhdsf5li.png

Представляем пример парсера для мониторинга Telegram каналов и автоматической пересылки сообщений в свой собственный канал. Код парсера как всегда открыт, поэтому есть возможность настроить нужный вид сообщений и редактировать логику работы.

Core Web Vitals
48k6m_230714093132.png

Парсер для анализа скорости сайта. Отчет о скорости сайта основан на реальных данных о просмотре сайтов пользователями Google Chrome, полученных из отчета Chrome User Experience Report (CrUX). Используя сервис calibreapp.

AI content detector
mtwlm_230712113200.png

Парсер для анализа текстов на предмет их генерации сервисами ИИ. Определяется вероятность того, что текст был написан человеком, а не искусственным интеллектом. Используется сервис writer.com.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

 
Добрый день , интересует софт по прохождению модерации аккаунтов на Яндекс для размещения отзывов, можете что-либо подсказать уже из созданных или же сколько будет стоить у вас соф с нуля по прохождению модерации? сроки? стоимость? информация?
 
Добрый день , интересует софт по прохождению модерации аккаунтов на Яндекс для размещения отзывов, можете что-либо подсказать уже из созданных или же сколько будет стоить у вас соф с нуля по прохождению модерации? сроки? стоимость? информация?


Здравствуйте, напишите в один из контактов тех поддержки для уточнения деталей - https://a-parser.com/pages/support/
 
Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Проверка текста на уникальность

Парсер для проверки текста на уникальность через онлайн сервис. Собираются данные об уникальности, а также список сайтов, на которых есть совпадения и процент совпадения на них.
  • Парсер переписан на TypeScript
  • Добавлена поддержка запросов в виде ссылок: парсер автоматически определяет тип запроса и если это ссылка - сначала парсит текст выбранным парсером
Парсер hotline.ua
Парсер для агрегатора цен hotline.ua. Данный парсер собирает по ключевым словам информацию из прайсов hotline.ua: имя, описание, цены, изображения и т.д.
  • Парсер переписан на TypeScript
  • Исправлен сбор данных
  • Обновлен набор собираемых данных
Парсинг подсети и организации по IP
Пресет для парсинга подсети и организации по IP
  • Исправлена ошибка 403, из-за которой парсер не собирал результаты
Парсер отзывов Wildberries Reviews
Сбор отзывов по товарам с wildberries.ru в csv таблицу. Собираются следующие данные: артикул товара, имя того кто оставил отзыв, дата, количество звёзд, текст отзыва.
  • Обновление в связи с изменениями в выдаче
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

 
Видео урок: Telegram канал - агрегатор сообщений из других каналов

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан способ создания телеграм канала агрегатора постов с других каналов.


Оригинальный парсер в Каталоге: https://a-parser.com/resources/477/

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 
1.2.2014 - множество улучшений и исправлений во встроенных парсерах

1.2.2014.png


Улучшения
  • В
    se-yandex.png
    SE::Yandex добавлена поддержка новой каптчи Яндекса
  • net-whois.png
    Net::Whois - обновлены whois сервера, добавлены новые опции, реализована обработка статуса Rate Limited
  • rank-keysso.png
    Rank::KeysSo - обновлен список регионов
  • shop-yandex-market.png
    Shop::Yandex::Market - добавлена поддержка редиректа с cvredirect=1
  • maps-google.png
    Maps::Google - улучшение Collect full region, добавлена опция OSM Mode и парсинг точки, добавлен новый собираемый результат $timestatus
  • В
    se-yahoo.png
    SE::Yahoo добавлена возможность парсить рекламную выдачу
  • Добавлена переменная $data в
    telegram-groupscraper.png
    Telegram::GroupScraper
  • se-bing.png
    SE::Bing - обновлены регионы и языки
  • JS парсеры: добавлена возможность делать запросы к другим парсерам в пакетном режиме
Исправления в связи с изменениями в выдаче
  • В
    se-google.png
    SE::Google исправлен сбор $corrected и $misspell
  • Частично исправлена работа
    se-bing.png
    SE::Bing, на данный момент все еще могут наблюдаться проблемы в некоторых случаях
  • Исправлена работа всех парсеров Ahrefs
  • Исправлена регистрация Яндекс аккаунтов через Chrome (
    se-yandex-register.png
    SE::Yandex::Register)
  • В парсерах SE::Google::KeywordPlanner::* исправлена авторизация по cookie
  • shop-yandex-market.png
    Shop::Yandex::Market,
    se-ask.png
    SE::Ask,
    check-roskomnadzor.png
    Check::RosKomNadzor,
    shop-wildberries-productinfo.png
    Shop::Wildberries::ProductInfo
Исправления
  • Исправлена ошибка при объявлении JS модуля в $tools.js

 
Сборник рецептов #58: обработка текстов с помощью ИИ, цены на крипту, поиск сообщений в ТГ-каналах

58-й сборник рецептов, в котором собраны: парсер для сервиса по обработке текстов с помощью ИИ (перефразирование, резюмирование...), парсер для проверки цен на криптовалюты с возможностью выбора из 5 бирж, а также парсер для поиска сообщений по ключевым словам в Telegram каналах.

NeuralWriter - перефразирование, генератор промптов, резюмирование
Парсер сервиса neuralwriter.com. С его помощью можно перефразировать текст (включая перевод на нужный язык), сформировать краткое резюме для большого текста, а также генерировать промпты для моделей ChatGPT и GPT. Парсер имеет возможность читать тексты из файлов.
ahils_230823130031.png


CryptoExchanges - одновременная проверка цены на криптовалюту на нескольких биржах
Парсер, позволяющий одновременно проверить цену на нескольких крипто биржах по тикеру. Поддерживается 5 бирж.
3fwbs_230824165245.png


Парсер поиска Телеграм постов по ключевым словам с tgdev.io/tme
Возможность парсить сообщения из Telegram каналов по ключевым словам. Собираются дата поста, ссылка на пост и его текст.
2023-08-25-12-33-15.png



Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

 

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)