A-Parser - продвинутый парсер поисковых систем, Suggest, WordStat, PR, DMOZ, Whois, DNS, etc

(Ответов: 237, Просмотров: 23228)
Страница 24 из 24 Первая ... 14222324
  1. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Сборник рецептов #51: история IP-адресов и парсинг страниц контактов

    51-й сборник рецептов, в котором мы делимся парсером сервиса builtwith.com и пресетом для сбора страниц контактов и контактных данных.

    Парсер BuiltWith.com. История IP-адресов и взаимосвязи
    Сервис builtwith.com предоставляет пользователям различные данные которые помогают в лидогенерации, аналитике продаж и информации о доле ранка передовых технологи.
    Для демонстрации возможностей А-Парсера по созданию JavaScript парсеров и обхода капчи в кастомных парсерах был создан данный пример, который реализует сбор малой части возможностей сервиса builtwith.com, а именно: сбор истории IP-адресов по нужному домену и другие веб-сайты, которые имеют общие IP-адреса с введенным доменом. Полезен SEO-специалистам для поиска сайтов конкурентов, сеток конкурентов, айпи адресов в временном промежутке.


    Парсинг страниц контактов, страниц Privacy Policy и Terms of use, email, соц. сети
    При помощи данного парсера можно собрать контактные данные со страниц контактов и страниц о компании. Страницы контактов часто содержат контактную форму, поэтому ссылку на нее тоже выводим в результат. Так же парсер собирает страницы Privacy Policy и Terms of use, на страницах которых иногда есть email. Дополнительно происходит сбор соц. сетей (фейсбук и твиттер). Все это необходимо для того чтобы можно было связаться по различным каналам с владельцами или администрацией сайтов для взаимодействия и сотрудничества.



    Еще больше различных рецептов в нашем Каталоге!

    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов



    • 0
  2. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    1.2.1604 - парсинг Google People also ask, новые методы в JS парсерах, адаптация к изменениям



    Улучшения
    • В SE::Google добавлен парсинг People also ask
    • В Rank::Ahrefs добавлен новый метод парсинга, данные, получаемые старым способом немного отличались от таковых в браузере
    • Реализована защита от gzip bomb
    • В SE::Yandex::Register улучшена работа с номерами и оптимизирован процесс регистрации
    • Улучшена работа с сессиями в SE::Yandex::WordStat
    • Для парсеров Яндекс добавлена возможность использовать аккаунты на своих доменах
    • Во всех парсерах Яндекса работа со smart captcha адаптирована к изменениям на источниках
    • JS парсеры: добавлен метод this.puppeteer.logScreenshot(), он позволяет логировать скриншот текущей страницы
    • JS парсеры: добавлены методы this.isContextAlive(), this.console.log, this.console.setPrefix и .setGlobalConsolePrefix, подробнее здесь и здесь
    • В SE::Yandex::WordStat::ByDate добавлена корректная обработка ситуаций, когда по запросу нет результатов
    • HTML::TextExtractor - оптимизирована скорость обработки
    Исправления в связи с изменениями в выдаче
    Исправления
    • Исправлена проблема с зависанием HTML::TextExtractor::LangDetect на некоторых запросах
    • Исправлена работа методов tools.task.* в JS API v2
    • Исправлена ошибка кодировки в Net::HTTP
    • Исправлена работа с прокси в Puppeteer, проблема появилась в одной из предыдущих версий
    • Исправлена ошибка со сбором title в Shop::Wildberries::ProductInfo в некоторых случаях
    • В Shop::Wildberries::ProductsList исправлен парсинг тегов
    • Исправлена работа SE::Bing::Translator в некоторых случаях
    • Исправлена некорректная инициализация Node на лицензии Enterprise
    • В SE::Bing - исправлена ошибка с выводом $pages



    • 0
  3. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Полезное видео: Как использовать A-Parser для крауд-маркетинга



    Наши друзья из Ant-Team.ru сняли полезное видео о том, как использовать A-Parser для крауд-маркетинга.

    Крауд-маркетинг использует отзывы и комментарии на сторонних ресурсах для продвижения компании.

    В видео показано, как выставить настройки в A-Parser, чтобы парсить поисковую выдачу Яндекс по информационным запросам, и какие переменные нужны для парсинга. Дана подробная инструкция, как добавлять в A-Parser прокси и сервисы разгадывания капчи.

    Также вы узнаете, как проверять качество ссылочной массы, рейтинг домена, беклинки и т.д.

    Смотреть видео на YouTube​

    Подписывайтесь на их телеграм-канал, там много полезной информации по SEO: https://t.me/seoantteam
    • 0
  4. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Автоматизация в SEO: как заменить отдел джунов парсером?

    Совсем недавно прошла юбилейная десятая онлайн-конференция по интернет-маркетингу Baltic Digital Days. Специалист по SEO Георгий Шилов выступил с докладом на тему "Автоматизация в SEO: как заменить отдел джунов парсером?"

    В докладе содержится много полезной информации по использованию A-Parser. Вы узнаете:
    • Что такое парсер
    • Сколько стоит джун в SEO
    • Проблемы в SEO
    • Автоматизация рутинных задач
    • Кластеризация
    • Мониторинг позиций
    • Комбинируем пресеты для решения любых задач
    • Тех. анализ и мониторинг
    и другие решения с помощью A-Parser

    Смотреть видео на YouTube
    • 0
  5. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Сборник рецептов #52: чекер e-mail, отзывы Wildberries и двойные ссылки в выдаче Google

    52-й сборник рецептов, в котором опубликованы парсер для универсальной проверки e-mail, парсер отзывов из Wildberries и пресет для сбора двойных ссылок одного сайта из выдачи Google.

    Универсальный чекер e-mail
    Парсер для универсальной проверки почт. Делается проверка на валидность, на наличие MX записей и на существование почты.


    Парсер отзывов Wildberries Reviews
    Парсинг отзывов из Wildberries в CSV таблицу с возможностью задать локацию и необходимое кол-во отзывов.


    Сбор двойных ссылок одного сайта из Google выдачи
    Парсинг двойных ссылок одного сайта с первой страницы выдачи Google в CSV таблицу.



    Еще больше различных рецептов в нашем Каталоге!

    Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники рецептов



    • 0
  6. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Курс "Специалист по дропам и PBN с нуля до профи" используя A-Parser (+включает лицензию)



    Наш хороший друг Николай Кодий (https://t.me/mypbn) запускает очередной набор на курс по подбору дропов и построению качественных сеток PBN, с применением A-Parser в качестве одного из основных инструментов.

    Старт - 26 сентября.

    Что это за обучение?
    Практический курс, после которого вы научитесь и узнаете:

    — какой софт нужен для поиска дропов, сколько он стоит, как продлевается и регится
    — как правильно анализировать и выбирать дропы для себя и на продажу, чтобы не получить фуфло
    — как строить PBN, что с ними делать дальше и как на них зарабатывать
    — как с помощью знаний, которые он даёт, стать универсальным и востребованным специалистом по построению PBN под любые страны и тематики

    Для кого это обучение?
    — Для seo-мастеров, которые хотят продвигать сложные ниши в различных гео. Для тех, кто ищет новые методы линкбилдинга. Для тех, кто хочет в текущей компании повысить компетенции и доход
    — Для тех, кто хочет освоить в новом году новую профессию. И стать специалистом в PBN

    Больше нигде вы не получите такой системной и понятной теории, такого большого практического опыта и возможности смотреть и усваивать информацию на живых вебинарах с преподавателем, отвечающим именно на ваши вопросы.

    Каждый из студентов бесплатно получает весь лицензионный софт (в том числе и A-Parser), необходимый для подбора дропов.

    Подробнее о курсе читайте на ленде курса - https://kurs.pbn.link
    И на FB странице Николая - https://www.facebook.com/nkodiy/posts/5305252276258938

    • 0
  7. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    1.2.1661 - новые парсеры: Яндекс Балабоба и позиции в DuckDuckGo, улучшения во встроенных парсерах



    Улучшения
    • Добавлен парсер позиций DuckDuckGo: SE:: DuckDuckGo::Position
    • Добавлен парсер Яндекс Балабоба: SE::Yandex::Balaboba
    • Реализована работа с XEvil через API Antigate v2
    • Добавлена передача кук Google при включении опции ReCaptcha2 pass proxy в SE::Google
    • Обновлен список доменов в SE::Yandex
    • В связи с тем, что Яндекс теперь всегда выдает по 10 результатов на страницу, в SE::Yandex убран параметр Links per page
    • В HTML::LinkExtractor и Check::BackLink добавлен сбор <a> тега
    • В Shop::AliExpress добавлена поддержка сессий
    • В HTML::EmailExtractor добавлена опция Skip meta tags, при ее включении указывает парсеру не собирать почты в meta тегах
    • В парсере DeepL::Translator актуализирован список языков
    Исправления в связи с изменениями в выдаче
    Исправления
    • Исправлен выбор региона в SE::Yandex
    • Исправлена обработка url с кириллицей в PAA SE::Google
    • Исправлена работа SE::Google::KeywordPlanner, в некоторых случаях парсер не видел ответ и ошибочно повторял попытки
    • Исправлена ошибка логина в парсере SE::Yandex:: Direct
    • В SE::Yandex::Register исправлен баг при отображении Яндексом ошибки о некорректном номере телефона или о других проблемах
    • SE::Google::Translate - в некоторых случаях парсинг завершался с ошибкой
    • Исправлен баг с ошибочным выводом результатов в Net::HTTP при сборе через регулярку, в случаях когда один запрос отработал успешно, а другой нет, и второй вывел результаты первого
    • Исправлена ошибка с висящими процессами Chrome после завершения задания на Windows 11
    • Исправлена доступность fs.constants



    • 0
  8. Дипломник Аватар для Forbidden
    • Регистрация: 17.08.2010
    • Сообщений: 208
    • Репутация: 21
    Сборник статей #16: вывод результатов в JSON, синхронизации файлов и SEO кейс продвижения сайта

    Представляем 16-й сборник статей, в который вошли статья о вариантах вывода результатов в JSON виде, статья о синхронизации А-Парсеров на разных ПК с помощью Google Диск и SEO кейс продвижения сайта с выходом на иностранный рынок.

    Обзор вариантов вывода результатов в JSON виде
    Полный обзор всех возможных способов вывода результатов в JSON виде с примерами: вывод в JSON для одиночных запросов, формирование JSON построчно, формирование объекта в памяти и вывод результатов в JSON в конце работы задания.



    Синхронизация А-Парсеров на разных ПК с помощью Google Диск (Google Drive)
    В этой статье описывается как синхронизировать файлы А-Парсера, конфиги, все настройки которые вы сделали на одном ПК, с другим ПК.
    В качестве инструмента будет использоваться простой и бесплатный Google Диск (Google Drive) с помощью которого вы можете хранить и передавать коллегам файлы и папки, а также работать над ними вместе с другими пользователями на компьютере или мобильном устройстве.



    Как мы потратили 1 млн рублей для выхода на иностранный рынок SEO: кейс с расходами и результатами
    Статья на vc.ru о том, как мы за 3 месяца вывели сайт с нуля в топ по Южной Африке. Делимся готовой пошаговой схемой быстрого вывода сайта на иностранный рынок, с данными по нагрузке сотрудников, расходами, таблицами и примерами ТЗ.
    Для массовой проверки выдачи Google использовался Python и парсер A-Parser.
    Кейсы по применению нашего парсера Google и его описание:
    https://a-parser.com/docs/parsers/se-google




    Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь.

    Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

    Все сборники статей



    • 0
Страница 24 из 24 Первая ... 14222324

Похожие темы

Темы Раздел Ответов Последний пост
LTK Parser - парсер поисковых подсказок на разных языках
Софт, скрипты, лицензии 12 06.05.2012 21:10
Парсер контента под дорвеи и сателлиты X-Parser
Софт, скрипты, сервисы 0 15.08.2010 23:51
KD Parser - парсер ключевых слов
Софт, скрипты, лицензии 2 10.04.2010 21:47
Хороший Парсер Я.Директ и Wordstat - Магадан
Поисковые системы 10 24.11.2009 16:52
Хороший Парсер Я.Директ и Wordstat - Магадан
Софт, скрипты, сервисы 4 15.09.2009 19:38

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры