MMGP logo
Присоединяйтесь к нашему инвестиционному форуму, на котором уже 641,002 пользователей. Чтобы получить доступ ко многим закрытым разделам и начать общение - зарегистрируйтесь прямо сейчас.
Сервисы и программы для работы с SEO (Поисковой Оптимизацией)
Старый 22.12.2023, 21:45
#141
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

1.2.2148 - бесплатное решение Яндекс каптчи, 3 новых парсера, поддержка нового WordStat



Улучшения
  • Открыто бесплатное тестирование решения Яндекс каптчи!
    В Util::AntiGate добавлен провайдер A-Parser.Captchas, его можно использовать без указания ключа доступа.
  • Добавлено 3 новых парсера:
  • В SE::Yandex::WordStat добавлена поддержка нового WordStat
  • В SE::Yandex::SQI добавлен сбор рейтинга магазина в поиске по товарам и рейтинга магазина на Яндекс Маркете
  • В Social::Instagram::Profile добавлен сбор ссылок, которые были прикреплены в профиле и сбор телефонов из bio
  • В Maps::Yandex добавлен сбор времени работы организации
  • Util::AntiGate адаптирован к изменениям в API 2captcha/rucaptcha. А также оптимизирована работа с click каптчей и добавлена опция Log captcha images, позволяющая отключать вывод картинок каптч в лог
Исправления в связи с изменениями в выдачеИсправления
  • Исправлена ошибка обработки некоторых HTML сущностей в HTML::TextExtractor
  • Исправлено определение Yandex.Metrika в Rank::CMS
  • Исправлена работа некоторых опций в SE::Startpage
Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
График работы поддержки на праздники



A-Parser Support вне форума
Старый 10.01.2024, 11:56
#142
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Сборник рецептов #61: сбор характеристик сайтов, парсер архива Telegram ботов и парсер Lalafo

61-й сборник рецептов, в котором содержатся: парсер для сбора характеристик сайтов, парсер архива телеграм ботов и парсер объявлений из Lalafo.

Анализ сайта с помощью be1.ru
Парсер для сбора характеристик сайтов из сервиса be1.ru. Сервис предоставляет отчет по около 60-ти характеристикам.


Парсер архива Телеграм ботов
Парсинг информации о Telegram ботах из сервиса BOTSARCHIVE. Для парсинга используется официальное API.


Парсер объявлений сайта Lalafo
Парсер крупнейшего сайта для размещения бесплатных объявлений Lalafo по поисковому (ключевому) запросу. Возможности: сбор номеров телефонов с объявлений, выбор количества страниц результатов, выбор домена, сбор результатов сразу в CSV таблицу.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов



A-Parser Support вне форума
Старый 20.01.2024, 02:42
#143
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Сборник статей #17: поиск и привлечение аудитории в Instagram, сбор баз сайтов на заданных движках

Представляем 17-й сборник статей, в который вошли статья о поиске и привлечении целевой аудитории в Instagram и статья о сборе баз сайтов на определенных движках.

Instagram - сбор пользователей, автоматическая отправка сообщений собранным пользователям в direct

В статье рассмотрен сбор целевой аудитории и привлечение её в наш инстаграм магазин с помощью автоматической рассылки в Direct.



Как спарсить WordPress сайты (и не только) через A-Parser

В этой статье показано как собрать сайты на движке WordPress через A-Parser с минимальным количеством мусора в виде других движков. Кроме того данный подход можно использовать для сбора баз на любых движках.



Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей

A-Parser Support вне форума
Старый 29.01.2024, 19:29
#144
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Скриншоты выдачи поисковой системы
Демонстрация возможности делать скриншоты страниц, получаемых другими парсерами
  • Добавлена возможность выбирать из нескольких поисковиков (Google/Яндекс/Bing, по аналогии можно добавить остальные)
  • Все результаты, получаемые от парсера поисковика, теперь перемещены в объект $p1.results (для примера реализован вывод $serp)
  • Небольшие изменения логики работы
Парсер изображений с Flickr
Парсинг картинок из Flickr по ключевому слову
  • Пресет переделан в JS парсер на TypeScript
  • Добавлен выбор параметров поиска: Sort, License, Color, Style
  • Добавлен параметр выбора количества страниц
  • Для каждой картинки реализована возможность парсить ссылку, заголовок, описание, владельца, количество добавлений в избранное и количество комментариев
Анализ скорости загрузки и юзабилити сайтов
Измерение скорости загрузки страниц, их юзабилити, получение скриншотов сайтов
  • Парсер переписан на JS API v2 (TypeScript)
  • Добавлена возможность указывать ключ API
  • Адаптация к изменениям на источнике
NeuralWriter - перефразирование, генератор промптов, резюмирование
Парсер сервиса neuralwriter.com
  • Добавлена поддержка разгадывания каптчи Cloudflare Turnstile - опция Util::Turnstile preset. Разгадывание капчи теперь обязательно, если тип запроса не Prompt Generator
Google Indexing API
Добавление или удаление страниц сайта в Google Indexing API
  • Парсер переписан на TypeScript (JavaScript API v2)
  • Добавлена возможность использовать несколько ключей
Генерация картинок ruDALL-E
Напишите текстовый запрос — получите сгенерированную ИИ картинку в rudalle.ru
  • Исправлена генерация с помощью старой модели (ruDALL-E Malevich)
  • Для генерации картинки старой моделью теперь не требуется подключение Util::AntiGate
  • Добавлен выбор модели, которая будет генерировать изображения, добавлена новая модель Kandinsky 3.0 (new)
  • В моделе Kandinsky 3.0 есть возможность выбрать стиль генерации изображения, доступны все стили
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!



A-Parser Support вне форума
Старый 09.02.2024, 22:00
#145
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Premium прокси от A-Parser


Мы рады представить вам новые Premium прокси-серверы, которые значительно улучшат вашу работу. Ключевые преимущества Premium прокси:
  • База более 10 миллионов резидентных (домашних) IP адресов: Обеспечьте себе разнообразие и стабильность соединения с нашей обширной базой IP адресов.
  • Быстрое время отклика: Мы гарантируем высокую скорость и оптимальное время отклика, обеспечивая эффективную работу ваших парсеров.
  • Гибкая фильтрация по странам и городам: Настройте прокси под свои потребности с помощью гибкой фильтрации, чтобы получать доступ к ресурсам из конкретных стран и городов.
  • Настройки ротации: Используйте различные режимы ротации, включая случайный IP на каждый запрос, ротацию от 1 до 60 минут и режим Sticky, который сохраняет IP на максимально возможное время.
  • Подходит для браузинга и парсинга: Наши прокси идеально подходят как для браузинга, так и для парсинга, с минимальным риском CAPTCHA и банов.
  • Доступ к прокси осуществляется по логину/паролю и протоколу SOCKS5, а также может быть организован сразу с нескольких компьютеров и серверов.
Лучшие цены на рынке: Premium прокси от $1 за гигабайт трафика.

Для всех пользователей A-Parser доступен бесплатный триал в Личном кабинете на 1 Гб.



A-Parser Support вне форума
Старый 21.02.2024, 11:49
#146
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

1.2.2228 - 2 новых парсера, множество улучшений и исправлений



Улучшения
  • Добавлен парсер геолокации IP/домена - IP::Geo
  • Добавлен парсер для разгадывания RotateCaptcha - Util::RotateCaptcha
  • В SE::Yandex добавлен параметр Serp time
  • В парсерах OpenAI::Completions и OpenAI::ChatGPT обновлены модели
  • В парсеры SE::Google::KeywordPlanner::* добавлен флаг, указывающий на точность данных
  • В SecurityTrails::IP добавлена возможность парсинга с авторизацией
  • В Shop::Aliexpress добавлена возможность парсить старую цену и валюту
  • В SE::Youtube::Video добавлена возможность собирать данные о Shorts
  • Добавлено информационное сообщение при ошибке импорта JS парсера
Исправления в связи с изменениями в выдачеИсправления
  • Исправлена логика работы SE:: Dogpile
  • Исправлена работа Maps::Yandex с разгадыванием каптч
  • Исправлена проблема с интерфейсом при сохранении региона в SE::Yandex
  • SE::YouTube - устранено игнорирование рязрядов в $views при Device = Mobile
  • Shop::Ebay - исправлены ошибки в парсинге цифровых значений
  • Shop::Aliexpress - исправлены ошибки парсинга $shipping_price и $sold_count
  • Исправлена работа tools.task.id в формате результата
  • Исправлена ошибочная возможность перезаписать default пресет настроек
  • Исправлена проблема зависания регулярных выражений в Parse custom result
  • Исправлена ошибка вызова Social::TikTok::Profile в JS парсере


A-Parser Support вне форума
Старый 01.03.2024, 23:03
#147
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Обзор Premium Proxy от A-Parser (скорость, выбор локации, браузинг)

В данном видео продемонстрирована настройка и скорость работы новых Premium прокси. Данные прокси вы можете использовать как в A-Parser, так и в браузере или в любом другом SEO-софте.


Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

A-Parser Support вне форума
Старый 12.03.2024, 22:10
#148
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Сборник рецептов #62: проверка текстов, Markdown разметка, простой файловый сервер на базе A-Parser

62-й сборник рецептов, в котором содержатся: парсер сервиса zerogpt для проверки текстов, пример использования Markdown разметки для генерации HTML страниц и альтернативный метод получения файлов результатов работы А-Парсера.

ZeroGPT - проверка грамматики и орфографии, детектор искусственного интеллекта
Парсер сервиса zerogpt.com. Поддерживается выбор режима работы с текстом: проверка грамматики и орфографии или детект искусственного интеллекта, т.е. был ли проверяемый текст сгенерирован с помощью ИИ.



Парсер перевода Markdown разметки в HTML
Парсер собирает выдачу Google встроенным парсером. Далее, используя заготовленный Markdown шаблон template.md, который можно легко редактировать по своему усмотрению, переводит Markdown разметку в HTML с учетом собранных результатов.



Альтернативный метод получения файлов результатов
Реализация простого файлового сервера на базе A-Parser. Суть примера заключается в том, чтобы по запросу на заранее известный url получить любой файл из папки results.
В качестве кейсов применения можно рассматривать любые задачи, в которых требуется получать прямой доступ к файлам результатов и при этом имена файлов заранее известны. Например: с помощью Планировщика периодически запускаются несколько заданий, которые пишут результаты в файлы со статическими именами. И с помощью данного пресета можно легко и в любое время получить эти файлы.


Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

A-Parser Support вне форума
Старый 22.03.2024, 13:20
#149
Любитель
 
Регистрация: 10.01.2017
Сообщений: 151
Благодарностей: 0
Автор темы Re: A-Parser 1.1 - продвинутый парсер ПС, кейвордов, контента, показателей, 70+ парсеров

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Парсер корейского поисковика Daum.net
Парсер собирает данные (ссылки, анкоры, сниппеты и связанные ключевые слова) из поисковой выдачи корейской поисковой системы daum.net.
  • Парсер переписан на TypeScript (JS APIv2)
  • Обновлены регулярные выражения, исправлена работа в целом
  • Убран totalcount, т.е. его больше нету в выдаче
Парсер BuiltWith.com. История IP-адресов и взаимосвязи
Сбор истории IP-адресов по домену и других веб-сайтов, которые имеют общие IP-адреса с искомым доменом.
  • Убрана опция разгадывания капчи, т.к. теперь данные видны после авторизации и капчи там не видно
  • Добавлена авторизация по логину и паролю
Анализ ключевых слов на seranking.com
Парсер для анализа ключевых слов с помощью сервиса seranking.com. Собираемые данные: частотность, стоимость клика, конкуренция, сложность, списки похожих ключевых слов, связанных ключевых слов, вопросов и ссылок органического трафика. В настройках доступен выбор источника (страна и поисковая система).
  • Исправлена работа с каптчей
  • Добавлена проверка выбора пресета Util::ReCaptcha2
  • Небольшая оптимизация кода
Оценка страниц с использованием Lighthouse
Оценка производительности, доступности и оптимизации веб-страниц с использованием Lighthouse. В качестве источника используется сайт web.dev.
  • Адаптация к изменениям на источнике
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!



A-Parser Support вне форума
Войдите, чтобы оставить комментарий.
Опции темы

Быстрый переход