[Forbidden]

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Парсинг поиска ВК
Сбор результатов поиска в социальной сети Вконтакте.

• Добавлен Check content
• Адаптация к изменениям на источнике

Получение списка пользователей, которые поставили у заданного объекта отметку «Нравится» в VK
Парсер для парсинга списка пользователей, которые лайкнули пост во Вконтакте.

• Переделан в JS парсер
• Адаптация к изменениям на источнике
• Поддержка фото и видео
• Поддержка API: вместо куки remixstid теперь следует использовать ваш ключ доступа (access_token)
• Мелкие правки

Подсказки pornhub
Парсер подсказок сайта для взрослых pornhub.com

• Переделан в JS парсер
• Адаптация к изменениям на источнике

Парсер Яндекс Кью
Парсер для сервиса Яндекс Кью, позволяющий собрать списки вопросов и ответов к ним

• Добавлен парсинг страницы ответов
• Адаптация к изменениям на источнике
• Рефакторинг

JS::Chrome::ScreenshotsMaker
Парсер для создания скриншотов сайтов с использованием puppeteer(Chrome)

• Поддержка pdf формата (возможность сохранять страницы в PDF)

Фильтрация по множеству признаков
Пример фильтрации страниц по большому количеству признаков

• Парсер переписан на JS APIv2
• Исправлен баг с дублированием сигнатур

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

[Forbidden]

Сборник рецептов #54: Google Shopping, Циан и парсер новостей с автоматическим переводом

54-й сборник рецептов, в котором представлены парсер Google Shopping, парсер базы недвижимости Циан и парсер новостей с автоматическим переводом контента на указанный язык.

Google Products
Парсер товаров по ключевым словам из выдачи Google Shopping


Парсер Циан
Парсер результатов поиска (с возможностью задать любые фильтры) на cian.ru


Парсер новостей inshorts.com с переводом контента
Парсер новостей inshorts.com с переводом контента через переводчик Deepl


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

[Forbidden]

1.2.1886 - обновление компонентов, новые возможности в работе с аккаунтами Яндекса, фиксы парсеров



Улучшения

• Обновление NodeJS до 18.15, Puppeteer до версии 19.11.0 и Chrome до 112-й версии
• Добавлен обход CloudFlare в Net::HTTP при Engine = Chrome
  
• Добавлены новые возможности в работе с аккаунтами Яндекса:
  
  • SE::Yandex::Register теперь сохраняет использованный прокси и ответ на секретный вопрос
    
  • SE::Yandex::WordStat использует для логина сохраненный прокси и умеет при необходимости отвечать на секретный вопрос
• В SE::Yandex добавлена возможность указывать id региона в обход существующего списка
  
• Улучшена работа Net::DNS, добавлена совместимость с некоторыми серверами
  
• Улучшен парсинг анкоров беклинков в Rank::Ahrefs

Исправления в связи с изменениями в выдаче

• SE::Google - адаптация к изменениям в верстке
• Исправлена работа с каптчами в SE::Yandex и SE::Yandex::WordStat
• Исправлена работа Shop::Yandex::Market при запросах в виде ссылки
• Исправлен парсинг фото в Shop::Wildberries::ProductInfo
  
• Исправлена ошибка при обработке каптчи в SE::Yandex::ByImage
  
• SE::Yandex, SE::Bing, SE::Seznam, SE::Baidu, SE::Google::Images, Rank::KeysSo, Rank::MajesticSEO, Rank::Ahrefs::KeywordDifficulty, Maps::Yandex, Shop::Wildberries::ProductInfo, SE::Yandex::ByImage

Исправления

• Исправлено использование переменных из Конструктора запросов в Начальном тексте
• Исправлена работа Net::Whois с доменами зоны .it, а также исправлено определение незарегистрированных доменов
  
• В SE::Yandex::WordStat исправлена ошибка, из-за которой парсер повторно не авторизовался

[Forbidden]

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Парсинг данных о Youtube канале
Парсер собирающий информацию со страницы о канале, кроме email который виден после авторизации. Так же собирает email из описания канала.

• Добавлено: парсинг ника канала, который начинается на @, кол-во видео

Парсер Google Places
Получение результатов поиска на Google Places

• Переписан на TypeScript
• Адаптация к изменениям на источнике

Парсинг Авито
Парсинг объявлений на avito.ru

• Запрос для получения номера теперь отправляется только в том случае, если в формате результата задан вывод номера

Анализ ключевых слов на seranking.com
Парсер для анализа ключевых слов с помощью сервиса seranking.com

• Переписан на TypeScript
• Добавлена поддержка разгадывания капчи - опция Util::ReCaptcha2 preset. Разгадывание капчи теперь обязательно
• Добавлена опция Currency с значением по умолчанию EUR
• Полностью переработаны собираемые результаты, они немного отличаются от предыдущих и их стало больше

Парсинг пользователей из группы ВК
Парсинг всех пользователей из любой группы Вконтакте через API

• Адаптация к изменениям на источнике

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

[Forbidden]

Сборник рецептов #55: сокращатель ссылок и парсер сервиса статистики и аналитики HypeStat

55-й сборник рецептов, в котором представлены парсер для сокращения ссылок с возможностью выбрать из 6-ти сервисов сокращения и парсер HypeStat - бесплатного сервиса статистики и аналитики.

Сокращатель ссылок
Данный парсер позволяет массово сокращать ссылки. На данный момент поддерживается 6 сервисов сокращения, можно выбрать любой из них, а также присутствует режим случайного выбора.


Парсер HypeStat
HypeStat - это бесплатный сервис статистики и аналитики, где вы можете найти информацию о каждом веб-сайте. Данный парсер собирает следующие данные: Technologies Summary, Traffic Summary, Traffic Sources, Competitive Data (SEMrush), Reputation Ratings (MyWot.com), DNS Lookup, Whois Lookup.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

[Forbidden]

1.2.1930 - 3 парсера для AI контента, обход каптчи Turnstile без сервисов, Instagram с авторизацией



Улучшения

• Добавлены новые парсеры:
  • OpenAI::ChatGPT - парсер ChatGPT
  • OpenAI::Completions - парсер OpenAI Completions
    
  • SE::You - парсер выдачи you.com
• В Util::Turnstile добавлена возможность разгадывания каптчи без использования сервисов
  
• В SE::Google::KeywordPlanner добавлена поддержка мультиаккаунтов, а также реализован пакетный парсинг
  
• В Social::Instagram::Post и Social::Instagram::Geo добавлена возможность парсить с авторизацией
  
• В SE::Bing добавлена возможность парсить рекламную выдачу
  
• Добавлен выбор метода получения данных в SecurityTrails::IP
• В SE::Google::Images добавлен сбор тегов
• Улучшена работа SE::DuckDuckGo
• В Shop::Wildberries::ProductsList добавлена возможность парсить категории

Исправления в связи с изменениями в выдаче

• SE::Google - множество адаптаций к изменениям в верстке на источнике
• Rank::KeysSo - исправлены парсинг невалидных результатов и ссылки в Organic pages
  
• Shop::Wildberries::ProductInfo - исправлен парсинг категории
  
• SE::Yandex::Direct - исправлен проход по пагинации
  
• SE::Seznam, SE::Dogpile, SE::Ask, Rank::Ahrefs::TrafficChecker, GooglePlay::Apps, SE::Google::Images, CoinMarketCap::LastPrice, SE::DuckDuckGo::Images, SE::Google::ByImage, SecurityTrails::Domain

Исправления

• Исправлен обход Cloudflare
• Исправлена ошибка в Rank::CMS, из-за которой не определялись некоторые движки
• Исправлена работа SE::Yandex::Suggest при выборе 2-го метода
• Исправлена работа Net::Whois с некоторыми доменными зонами
• Исправлен выбор региона в SE::Yandex::Direct
• JS парсеры: исправлена работа threadDestroy()

Ребята из Ant-Team рассказывают про аукционы освобождающихся доменов в РФ: практическое применение на примерах и аналитика.

• Зачем SEO-специалисты или крупные компании приобретают виртуальную недвижимость.
• Кто являются вашими конкурентами по аукционам.
• Какого размера выделять бюджет на аукционы доменов в России.

➡️ Читайте статью по ссылке: https://vc.ru/seo/716986-kto-i-zache...cionnye-domeny

И до 15 июня вы еще можете попасть на второй поток курса по PBN от А до Я: https://pbn-course.ru/.

[Forbidden]

Видео урок: Сокращатель ссылок

Новый видео урок по работе с A-Parser от DIM STUDIO в котором показан пример работы с парсером для массового сокращения ссылок.



Оригинальный парсер в Каталоге: https://a-parser.com/resources/455/

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!



Промо от нашего партнера



Leadgid — топовая международная финансовая партнёрская сеть.

Найдётся всё, что нужно новичку и профи:

• выбор из 500+ офферов по 30+ ГЕО
• личная поддержка для каждого вебмастера
• бесплатная платформа LeadCore со всеми инструментами
• регулярные конкурсы с крутыми призами и поездками.

А ещё в Leadgid постоянно проходят разные ивенты, оффлайн-встречи и онлайн-вебинары, обучения, акции и многое другое.

Присоединиться просто — переходи на сайт, регистрируйся и жди волшебное письмо с инструкцией

[Forbidden]

Сборник рецептов #56: Instagram Direct, переводчик Reverso, рекламные объявления из Naver

56-й сборник рецептов, в котором собраны: парсер для рассылки сообщений в Instagram Direct, парсер переводчика Reverso и парсер для сбора рекламных объявлений по ключевым словам из Naver.

Instagram Direct

Парсер для автоматической отправки сообщений указанным пользователям в Instagram.

Парсер переводчика Reverso

Парсер для перевода текстов через сервис reverso.net. Кроме непосредственно перевода на выбранный язык, умеет определять язык исходного текста, собирает варианты перевода, примеры в контексте, а также перефразирования и альтернативные переводы исходного текста.

Naver Ads

Парсер для сбора рекламных объявлений по ключевым словам из Naver. Собирает заголовок, описание, ссылка, сайт и картинку-превью.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

[Forbidden]

1.2.1958 - 5 новых парсеров, улучшения интерфейса, новые опции в существующих парсерах



Улучшения

• Добавлено 3 новых парсера:
  • DeepL::Write - проверка и редактирование текстов через одноименный сервис
  • Reddit::Comments - парсер комментариев на Reddit
    
  • Reddit::Posts - парсер сообщений на Reddit
• SE::Google::KeywordPlanner теперь разделен на 2 независимых парсера:
  • SE::Google::KeywordPlanner::Ideas
  • SE::Google::KeywordPlanner::SearchVolume
• В парсеры KeywordPlanner добавлен параметр authuser, он теперь обязателен при способе авторизации через куки
  
• В SE::Google добавлена информация о флагах результатов
  
• В SE::Yandex::Direct::Frequency добавлен обход каптчи для запросов без использования аккаунтов
• В SE::Google::Images добавлена возможность управлять параметром Safe search
  
• В Net::Whois добавлена опция Checking by DNS record, которая проверяет на существование IP по домену
• Улучшено взаимодействие со всплывающей подсказкой с переменными выбранного парсера:
  • добавлен вывод полного названия выбранного парсера
  • добавлена ссылка на описание выбранного парсера
  • подсказку теперь можно прокручивать
  • данные теперь можно копировать
• При раскрытии выпадающего меню выбора парсера теперь названия парсеров видно целиком
• В настройках задания добавлена опция остановки задания при неудачном запросе
• В настройки потоков добавлена опция Proxy strategy, она позволяет управлять стратегией использования прокси

Исправления в связи с изменениями в выдаче

• SE::Google - адаптация к изменениям в верстке
• Исправлен парсинг related в SE::Yandex
  
• Исправлен Cloudflare::Radar
• Парсер SE::Quora адаптирован к изменениям в выдаче
• Исправлена работа Net::Whois с некоторыми доменными зонами, а также ряд других ошибок
• Shop::eBay

Исправления

• Исправлено ошибочное заполнение неудачными при паузе/остановке задания
• Исправлено игнорирование опции Extra query string в Maps::Yandex

[Forbidden]

Сборник рецептов #57: пересылка сообщений из Telegram каналов, скорость сайтов, проверка текстов

57-й сборник рецептов, в котором представлены: парсер для агрегации сообщений из нескольких Telegram каналов в один; парсер для анализа скорости работы сайта; парсер для анализа текстов на предмет их генерации сервисами ИИ.

Автоматическая пересылка сообщений из нескольких Telegram каналов в один

Представляем пример парсера для мониторинга Telegram каналов и автоматической пересылки сообщений в свой собственный канал. Код парсера как всегда открыт, поэтому есть возможность настроить нужный вид сообщений и редактировать логику работы.

Core Web Vitals

Парсер для анализа скорости сайта. Отчет о скорости сайта основан на реальных данных о просмотре сайтов пользователями Google Chrome, полученных из отчета Chrome User Experience Report (CrUX). Используя сервис calibreapp.

AI content detector

Парсер для анализа текстов на предмет их генерации сервисами ИИ. Определяется вероятность того, что текст был написан человеком, а не искусственным интеллектом. Используется сервис writer.com.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов