A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Видео урок: Сбор форм комментариев с помощью A-Parser

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан сбор форм комментариев.



Данный видео урок показывает, как собрать сайты, где можно оставить свой комментарий в форму комментирования статей.

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 

Обновленные пресеты в каталоге A-Parser ч.2

Парсинг количества трафика на сайтах
Данный парсер позволяет собирать данные о посещаемости сайтов за день, неделю, месяц, тесты, параметры домена, техническое состояние, внутреннюю оптимизацию.

Сохранение в результатах TOP-3 Google
Пресет сохраняет первые ТОП-3 сниппета выдачи Google.

Парсер Яндекс Кью
Парсер собирает список вопросов по запросам и ответы к ним. Для каждого вопроса, кроме ответа, собираются данные о рейтинге, дате публикации, авторе, просмотрам и т.д.

JS::MailValidator
Проверка существования e-mail адресов. Поддерживаются 9 почтовых сервисов: Gmail, Outlook, Yandex, Rambler, Yahoo, Mail.ru, GMX, AOL, iCloud


Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

 

1.2.1770 - 3 новых парсера, адаптация существующих парсеров к изменениям, исправления ошибок



Улучшения

• Добавлены новые парсеры:
  • Rank::Ahrefs::BrokenLinks - сбор кол-ва и списка (топ10) битых входящих и исходящих ссылок
  • Rank::Ahrefs::TrafficChecker - оценка трафика, сбор истории трафика и списков ключевых слов, страниц и стран с наибольшим трафиком
    
  • SE::Quora - парсинг поисковой выдачи Quora по ключевому слову с возможностью выбирать тип и время результата
• Обновлен список регионов в парсерах Яндекс, убраны регионы, на которых поиск больше невозможен. В частности из-за того, что по-умолчанию был выбран регион Россия, парсер работал очень плохо, почти постоянно получая каптчи, т.к. данный регион больше не доступен для выбора в Яндексе. Также оптимизирован поиск региона при выборе в combobox.
• Улучшена обработка Node-модулей (в некоторых случаях использовалась неверная версия)
  
• JS парсеры: this.logger.put и this.logger.debug форматируют вывод аналогично console.log, благодаря чему теперь выводить объекты можно без использования JSON.stringify

Исправления в связи с изменениями в выдаче

• Исправлен парсинг PAA в SE::Google
• В SE::Google::Cache исправлена ошибка, из-за которой отсутствовали результаты по некоторым запросам
• Исправлен GooglePlay::Apps, изменен набор собираемых данных
• Исправлена работа Net::Whois с доменной зоной .fr
• В SE::Yandex::SQI убраны переменные $user_choice и $popular, т.к. эти данные больше не отдаются
• Check::RosKomNadzor, Shop::Wildberries:roductsList, Shop::Wildberries:roductInfo, Rank::Ahrefs, Rank::Ahrefs::KeywordDifficulty, SE::Google::Images, Rank::MajesticSEO

Исправления

• В SE::Yandex исправлена ошибка с определением бана на мобильной верстке
• В SE::Google::Translate теперь headless включен по-умолчанию
• Исправлена проблема с русскоязычными именами файлов в функции Запустить по завершению

Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
График работы поддержки на праздники

 

Видео урок: Ищем продвигаемые ссылки в отчётах Xrumer c помощью парсера Check::BackLink

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показано, как искать продвигаемые ссылки в отчётах Xrumer c помощью парсера Check::BackLink



Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 

1.2.1794 - поддержка Cloudflare Turnstile, множество исправлений во встроенных парсерах

Улучшения

• Добавлен парсер для разгадывания каптч Cloudflare Util::Turnstile
• Добавлен парсер для отправки сайтмапов в Google SE::Google::SitemapPing
• В парсеры Util::ReCaptcha2, Util::ReCaptcha3, Util::hCaptcha добавлена поддержка сервиса captchas.io
• В Rank::CMS добавлена возможность выводить $response
• В Cloudflare::Radar добавлена возможность выводить raw data

Исправления в связи с изменениями в выдаче

• Исправлена работа с каптчами в парсерах Яндекс
• Исправлена работа SE::Google::TrustCheck для мобильной выдачи
• Исправлена работа с каптчами в парсерах Ahrefs
• Исправлен парсинг сниппетов в SE::Seznam
• Исправлен парсинг related keywords в SE::Baidu и SE::Bing
• Исправлен парсинг totalcount в SE::Yahoo
• Исправлена работа Check::RosKomNadzor при выборе одного из доменов
• SE::Google, SE::Yandex, SE::Google::Images, SE::Google::ByImage, SE::Bing::Translator, Cloudflare::Radar, Shop::Amazon, Shop::eBay, SE:: Dogpile::Images

Исправления

• Исправлена работа SE::Yandex::ByImage с запросами, содержащими символы кириллицы

 

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Парсинг Авито
Парсер площадки объявлении Авито.

• Исправлена работа в связи с изменениями на источнике

Парсер prom.ua
Парсер маркетплейса prom.ua. Позволяет собирать данные из объявлений, включая имена продавцов и номера телефонов.

• Исправлен проход по пагинации и сбор данных со страниц объявлений

Парсер отзывов Wildberries Reviews
Парсер отзывов Wildberries Reviews. Сбор отзывов по товарам с wildberries.ru в csv таблицу

• Исправлена работа парсера

Парсинг ресурса Booking.com
Парсинг ресурса Booking.com, получение результатов поиска квартир и отелей на сайте.

• Поправлены регулярные выражения
• Добавлена возможность задавать нужную валюту

Универсальный чекер апдейтов(текста, цен и т.п.) на страницах с уведомлением в Telegram
Парсер, который позволяет проверять изменения на разных страницах и получать уведомления в Telegram

• Парсер переписан на JS APIv2
• Добавлена возможность проверять значения в заголовках

Парсинг объявлений из olx.ua/olx.pl
Парсер международной площадки объявлений OLX. Позволяет собирать данные из объявлений, включая цены, имена авторов, телефоны, адреса и т.д.

• Реализована автономность в работе с доменными зонами
• Адаптация к изменениям на источнике (включая восстановление возможности сбора телефонов)

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

 

Кейсы с использованием A-Parser от Ant-Team.ru

Представляем вашему вниманию несколько кейсов от Ant-Team.ru в которых был использован A-Parser.

Что влияет на позиции сайта в Google? Кейс по работе с PBN: растем в 3 раза по трафику и на 345% по позициям



Статья посвящена опыту продвижения сайта в поисковой системе Google работая с PBN (Private Blog Network). В статье представлена детальная инструкция, рассмотрены трудозатраты и показаны скриншоты по позициям и трафику. Также пошагово описан подход к работе со ссылками, показано как собиралась сетка PBN и какие результаты это принесло.

Понятно, что они пишут в большей степени клиентские кейсы, где технической стороне уделяется не так много внимания. Но всё, что они сделали, основано на А-Парсере. Все дропы, которые они собирают, проверяют и агрегируют у себя в базе для последующей обработки, они получают с помощью нашего парсера.

Рекомендуем ознакомиться со статьей и понять, каких результатов можно достичь, используя A-Parser.


ТОП-10 в Google за 35 дней: опыт работы с PBN и подклейкой доменов



Еще один интересный кейс, но уже не по аукционникам, а по реальным дропам, которые можно найти с помощью A-Parser.

Здесь описывается опыт работы с PBN и приводятся советы по использованию этого инструмента для создания качественных обратных ссылок на сайт. Также рассказывается о том, как автор использовал подклейку доменов для улучшения авторитета своего сайта и приводятся советы по выбору подходящих доменов. Кроме того приведены примеры использования A-Parser для автоматизации поиска доменов. А-Parser собирает все внешние ссылки с указанного домена и используется для массовой проверки доступности доменов и получения информации о них.

В статье, как обычно, минимум технической информации, но они активно отвечают на вопросы в комментариях. Если интересно, то спрашивайте, как искать подобные дропы и что для этого нужно. А зачем вообще это делать? Ответ очевиден: взять топ Гугла за 35 дней способен не каждый.

Если вы занимаетесь продвижением сайтов и хотите узнать больше о PBN и подклейке доменов, мы рекомендуем вам прочитать данную статью.

 

Курс по PBN от Ant-Team.ru



Ребята из Ant-Team.ru запустили курс по PBN

Курс полностью основан на A-Parser и разбит на две части: проф. и стандартная.

В профессиональной версии все процессы парсинга полностью автоматизированы и не требуют каких-либо доработок, вплоть до дашбордов с дропами и статистикой по ним.

В стандартной версии Ant-Team научат вас настраивать A-Parser и парсить дропы в ручном режиме.

Набор на курс продлится до 30 марта, но начать обучение можно уже сегодня.

Программа и регистрация по ссылке: https://pbn-course.ru/

 

1.2.1848 - 2 новых парсера, множество улучшений и исправлений во встроенных парсерах



Улучшения

• Добавлены новые парсеры:
  • SE::YouTube::Video - позволяет парсить данные о видео на Youtube (включая субтитры)
  • Rank::BingAnalytics - парсер данных из аналитики Bing в боковой панели Edge
• В связи с неактуальностью удалены следующие парсеры: Rank::Alexa, Rank::Alexa::API, SE::MailRu, SE::MailRu:: Position
  
• Исправлен парсинг вопросов-ответов (PAA) в SE::Google
• Улучшена обработка 404-го кода ответа в Rank::KeysSo
• В Rank::Ahrefs::KeywordDifficulty в переменные добавлен shortage
  
• В Util::Turnstile добавлен провайдер CapSolver
• Во всех парсерах Ahrefs добавлена опция Turnstile pass proxy, подробнее здесь
  
• В парсерах Bukvarix добавлена возможность использовать свой API ключ, дополнительная информация здесь
  
• В Maps::Google добавлена возможность получать ссылку на "Я владелец компании"
  
• В SE::Google::KeywordPlanner добавлена возможность парсить тренды поисковых объёмов, дополнительная информация здесь
  
• Обновлен список языков в DeepL::Translator
• В Social::Instagram:: Profile добавлена возможность парсить с авторизацией
• Улучшено определение наличия кеша в SE::Google::Cache
  
• В Net::Whois добавлен новый метод обработки результатов для некоторых доменных зон
• Продолжается миграция встроенных парсеров на JS APIv2, в этом релизе переписано 10 парсеров

Исправления в связи с изменениями в выдаче

• Исправлена работа SE::Yandex::Register через Chrome, дополнительная информация здесь
• В SE::Google не собирались результаты при типе News, также исправлено получение $totalcount при отсутствии результатов
• Исправлена работа SE::Yandex:: Position при выборе Search sites from (rstr=)
• В Shop::Yandex::Market исправлен парсинг цен
• Исправлены и адаптирован к изменениям на источниках: SE::Google, SE::Yandex::SQI, Rank::KeysSo, Cloudflare::Radar, SE::Quora, SE::Yandex::Translate, Shop::AliExpress, SE::Startpage, Rank::Ahrefs

Исправления

• Исправлено зависание задания во время повторного запуска
  
• Исправлена ошибка с отправкой сообщения о неверно разгаданной каптчи в Util::AntiGate
• В CoinMarketCap::LastPrice был пустой $data
• Rank::Ahrefs::KeywordGenerator не переходил к решению каптчи при определенном формате результата
  
• Исправлена ошибка в SE::Yandex:: Direct::Frequency, из-за которой при использовании аккаунтов все запросы были неудачные
• Исправлен SEO:: Ping
• Исправлено декодирование сущностей в Rank::MOZ
• JS парсеры: исправлен this.utils.urlFromHTML(), не все сущности корректно декодировались

Артур Корсаков запускает мастер-группу по Техническому SEO​

Курс состоит из 3х частей:

• Блок 1
  • Технический аудит сайта,
  • Исследование кода Яндекса,
  • Скрытие ссылок от различных сервисов,
  • Клоакинг для серых ниш.
• Блок 2
  • Парсинг структуры конкурентов,
  • Работа с Chat GPT,
  • Работа с релевантностью.
• Блок 3
  • Настройка программы A-Parser,
  • Создание собственных пресетов,
  • Парсинг тематических дропов с ссылками из Википедии,
  • Работа с ссылочным профилем.

Тем, кто присоединится до пятницы, 31 марта (включительно), получат доступ до июля к эксклюзивной бета-версии закрытого инструмента ГАР (Гибридный анализ релевантности).

В которую уже входят следующие функции:

• Анализ на основе формулы SWBM25 (хитрый BM25 в скользящем окне),
• Рекомендации по микроразметке,
• Семантические Коконы.

Старт планируется 3 апреля!

Подробности по ссылке:
https://vk.com/@-213214163-master-gruppa-po-tehnicheskomu-seo-2023

Чтобы присоединиться нужно написать лично Артуру по любому из контактов:
https://artur2k.ru/about/