Дайджест новостей A-Parser
Парсим базу для GSA SER
Новая статья от нашего пользователя @Reset о сборе баз для GSA Search Engine Ranker.
A-Parser и CapMonster Cloud: Как быстро и эффективно решать капчи при парсинге
Статья об интеграции A-Parser и Capmonster Cloud.
Парсер prom.ua
Обновление парсера товарных позиций prom.uaПарсинг объявлений из olx.ua/olx.pl/olx.kz
- Парсер переписан на API v2
- Исправлена ошибка TypeError: Cannot read properties of undefined (reading 'company')
- Исправлен проблема, что переменные $contactemail, $contactperson и $image всегда были none
Обновление парсера обьявлений из сайтов olxЕсли вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.
- Добавлена возможность парсить olx.kz
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
A-Parser - продвинутый парсер поисковых систем, Suggest, WordStat, PR, DMOZ, Whois, DNS, etc
(Ответов: 307, Просмотров: 37286)
- 09.09.2024 15:43
- 19.09.2024 16:04
Дайджест новостей A-Parser
Sensor Tower
Новый парсер в Каталоге для сбора данных о мобильных приложениях из сервиса Sensor Tower
Парсер Aliexpress товаров
Обновление парсера, позволяющего получить информацию о товаре на aliexpress- Адаптация к изменениям на источнике
- $delivery теперь нету
- Теперь работает только с доменом https://aliexpress.ru
Анализ скорости загрузки и юзабилити сайтов
Обновление парсера для измерения скорости загрузки страниц и получения скриншотов сайтов- Исправлен парсинг результатов $mobile_speed и $desktop_speed
- Добавлен парсинг новых результатов (Производительность) $mobile_performance и $desktop_performance
Pananames - доступность, цена домена
Обновление парсера, позволяющего проверить доступен ли домен и его цену- Обновление в связи с усилением защиты на сервисе
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- 30.09.2024 20:53
1.2.2414 - новый парсер Reddit, улучшения встроенных парсеров, вебинар ZennoPoster + A-Parser
Улучшения- Добавлен новый парсер Reddit::PostInfo
- В SE::Bing добавлена поддержка блока связанных ключевых слов справа
- В SE::YouTube::Video добавлена опция Login required is error
- Улучшена работа HTML::TextExtractor, некоторые текстовые блоки пропускались
- Улучшен поиск почт в HTML::EmailExtractor, не собирались почты у которых имя состоит из одного символа
- Обновлены заголовки запросов в Rank::MajesticSEO
- В Net::HTTP добавлена обработка бана IP при обходе CF
- В Net::HTTP добавлена опция Try use HTTP/1.1 for Protocol error, которая указывает парсеру повторить запрос с HTTP/1.1 если был включен HTTP/2 и получена ошибка протокола
- Исправлена работа с каптчей в SE::Google::Images
- Исправлен проход по пагинации в SE::Bing в некоторых случаях
- Исправлен парсинга subdomains в SecurityTrails:: Domain, теперь требуется авторизация
- В Shop::Wildberries::ProductsList дополнительно исправлено получение $totalcount
- Адаптированы к изменениям на источниках: SE:: DuckDuckGo, SE::Bing, SE::You, Shop::Yandex::Market
- Исправлена ошибка при повторном разгадывании каптчи в Check::RosKomNadzor
- В Util::SMS убрано ошибочное сообщении о плохом конфиге
- В DeepL::Translator добавлен русский язык, ошибочно был удален в предыдущих версиях
- В SE::Yandex::WordCraft исправлены ошибки в логике работы и исправлена работа с каптчей
- В Shop::Wildberries::ProductsList исправлено заполнение $pages
Приглашаем вас на бесплатный вебинар, который проведет опытный пользователь ZennoPoster Astraport.
Когда: 3 октября в 19:00 по московскому времени
Спикер: Astraport
Этот вебинар предназначен для всех, кто хочет разобраться в актуальных тенденциях SEO, в каких задачах получения трафика на сайт поможет ZennoPoster.
Краткий план вебинара:- Общие тенденции SEO.
- В каких задачах получения трафика на сайт поможет ZennoPoster:
- Парсинг ключей с сервисов и исходного текста с сайтов конкурентов с помощью А-parser.
- Генерация контента через нейросети (текст, картинки, видео).
- Постинг на сайты или создание HTML.
- Продвижение ссылочным и ведением своих соц. сетей.
- Вопросы и ответы.
- 10.10.2024 21:40
Дайджест новостей A-Parser
Norton SafeWeb
Новый парсер в Каталоге примеров, позволяет проверять насколько безопасны сайты для посещения по данным компании Norton.
Google Finance
Еще одна новинка в Каталоге примеров: парсер для поиска акций, биржевых фондов и других активов через сервис Google Finance.
Парсер vseinstrumenti.ru
И еще один новый парсер в Каталоге - парсер для сбора данных о товарах на сайте vseinstrumenti.ru.
Обновление ранее опубликованных примеров- Парсер prom.ua: адаптация к изменениям на ресурсе
- Сбор ссылок с GET параметрами: актуализация пресета, SE::Google::Modern заменен на SE::Google
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- Парсер prom.ua: адаптация к изменениям на ресурсе
- 22.10.2024 15:41
Дайджест новостей A-Parser
Генератор картинок BlinkShot
Парсер для сервиса BlinkShot, который генерирует изображений почти в реальном времени с минимальными задержками и без цензуры.
Парсер tgstat.ru
Парсер информации из tgstat.ru. Состоит из 2-х пресетов: парсер ссылок из категорий tgstat.ru и парсер информации со страниц каналов и чатов.
Парсер habr.com
Парсер постов на habr.com. Собирает информацию о постах по ключевым словам с проходом по пагинации и возможностью сортировки.
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- 06.11.2024 14:26
Дайджест новостей A-Parser
Sucuri sitecheck
Парсер для проверки безопасности сайта через сервис Sucuri. В качестве запросов принимает домены, а в результат по-умолчанию выводит рейтинг, список черных списков, в которых числится домен, информацию о сертификате, список IP, CDN и конечный URL редиректа.
Разбивка результата по времени
Пример шаблона для Формата имени файла результата, который создает новый файл результата каждые N секунд.
Парсер prom.ua
Обновление парсера для парсинга товарных позиций prom.ua. Исправлены следующие ошибки:- Когда парсер находит 0 товаров, он идет на новую попытку
- Когда доходит до последней страницы, парсинг останавливается
Обновление парсера для сервиса blinshot.io. Реализованы следующие изменения:- Добавлен Consistency mode
- API запрос адаптирован к изменениям
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- 15.11.2024 22:20
Видео урок: разбивка результата по времени и числу строк
Новые видео по работе с A-Parser от DIM STUDIO:
В первом видео показано, как использовать A-Parser для разбивки результата по времени. Готовый пресет доступен здесь.
Второе видео демонстрирует метод разбивки результата по числу строк. Готовый пресет доступен здесь.
Плейлист со всеми видео уроками от DIM STUDIO
Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!
- 25.11.2024 22:16
1.2.2502 - множество багфиксов, добавлена поддержка нового сервиса разгадывания каптч
Улучшения- В парсерах Rank::Ahrefs::* добавлен параметр Additional headers, с его помощью можно добавлять заголовки к запросу
- Добавлена поддержка сервиса NextCaptcha в парсеры Util::* Сервис поддерживает работу с hCaptcha, ReCaptcha2 и ReCaptcha3
- В Rank::CMS теперь по-умолчанию RegExp engine = RE2
- В Rank::Ahrefs добавлена обработка доменов, по которым нету информации
- Shop::Amazon некорректно выводил количество продаж
- Исправлена ошибка App ID not found в Social::Instagram::Tag
- В SE::Google исправлен парсинг при Serp type = News, а также в целом парсер адаптирован к изменениям в выдаче
- Исправлена работа SE::Startpage
- Исправлена работа SecurityTrails:omain с опцией Mode = DNS Records
- В Shop::Yandex::Market исправлен проход по пагинации и парсинг наименований товаров
- В SE::Google::Images исправлены проход по пагинации и ошибка при парсинге с выбором размера
- В парсерах SE::Google::KeywordPlanner::* исправлена авторизация в некоторых случаях
- Исправлена логика выбора прокси после подзапросов к парсерам (например, при обращении к парсеру каптч из основного парсера)
- Исправлена ошибка при работе с капчей в SE::Yandex, которая появилась из-за изменений в API одного из используемых в Util::AntiGate модулей
- Исправлена загрузка больших списков прокси
- Исправлена работа опции Collect full region в Maps::Google
- Исправлена работа Rank::CMS в некоторых случаях
Тэги топика:
Похожие темы
Темы | Раздел | Ответов | Последний пост |
---|---|---|---|
LTK Parser - парсер поисковых подсказок на разных языках | Софт, скрипты, лицензии | 12 | 06.05.2012 21:10 |
Парсер контента под дорвеи и сателлиты X-Parser | Софт, скрипты, сервисы | 0 | 15.08.2010 23:51 |
KD Parser - парсер ключевых слов | Софт, скрипты, лицензии | 2 | 10.04.2010 21:47 |
Хороший Парсер Я.Директ и Wordstat - Магадан | Поисковые системы | 10 | 24.11.2009 16:52 |
Хороший Парсер Я.Директ и Wordstat - Магадан | Софт, скрипты, сервисы | 4 | 15.09.2009 19:38 |