Новая тема   Ответить

 A-Parser Support
1.2.2640 - новый парсер скриншотов, оптимизации и исправления встроенных парсеров, интерфейса и API



Улучшения

• Добавлен новый парсер - Browser::ScreenshotsMaker
  
• Исправлен и улучшен парсинг генеративных ответов в SE::Yandex
  
• В SE::Google::Translate улучшен перевод в Desktop режиме
  
• В SE::Bing добавлена возможность указывать язык результатов
  
• В Net::HTTP для Engine=Chrome добавлен $response.Time
  
• IP::Info - добавлена переменная $ip
  
• Обновлен список стран в парсерах Ahrefs
  
• На карточках заданий в очереди даты теперь выводятся с годом
  

Исправления в связи с изменениями в выдаче

• Окончательно реализован обход проверки на JS в SE::Google
  
• Исправлена ситуация когда в SE::Yandex при Engine=Browser выдача ошибочно определялась как каптча
  
• Исправлено авторазгадывание в Util::Turnstile
  
• Исправлен парсинг PAA в SE::Google
  
• Исправлена работа Reddit::Posts
  
• Исправлена ситуация с попаданием рекламы в результаты Shop::Amazon, а также исправлен сбор $commentscount
  
• Исправлен сбор некоторых данных в Social::Instagram::Post
  

Исправления

• SE::Google - исправлена проблема утечки памяти связанной с использованием Playwright
  
• SE::Google::KeywordPlanner::SearchVolume - исправлено определение $volume_type
  
• Maps::Google - исправлена работа с опцией Collect full region в некоторых случаях
  
• Исправлена ситуация, когда в пресете настроек SE::Yandex не сохранялся Region of serp
  
• API: исправлена работа метода changeProxyCheckerState
  
• API: исправлена ошибка из-за которой при использовании метода getAccountsCount парсер падал, если аккаунтов 0
  

 A-Parser Support
Дайджест новостей A-Parser

Парсинг расшифровки Youtube видео
Новый пресет в Каталоге, в котором показан способ парсинга расшифровки Youtube видео с использованием встроенного парсера SE::YouTube::Video. Решение основано на выводе собираемых результатов в том виде, в котором они отображаются в браузере.

Парсер всех видео с Youtube канала
Обновление парсера для сбора списка видео (с их характеристиками) из Youtube каналов

• Исправлена работа с каналами, у которых всего 1 вкладка
  
• Добавлена обработка Shorts, если они выдаются вместе с видео (или вместо видео)
  
• Добавлена обработка случаев, когда канал не существует
  
• Исправлен обход окна соглашения, которое появляется при запросах с IP некоторых стран
  
• Исправлена логика повторных попыток, в некоторых случаях парсер их не делал
  

Парсинг популярных запросов за сутки Google Trends
Обновление парсера для сбора трендовых поисковых запросов из Google Trends

• Парсер полностью переписан в связи с изменениями на источнике
  
• Изменен набор собираемых данных
  
• Изменен список параметров
  

Парсинг объявлений из olx.ua/olx.pl/olx.kz
Очередное обновление парсера данных из объявлений на OLX

• Исправлен парсинг номеров телефонов
  

Парсинг Авито
Обновление парсера объявлений Аvito

• Исправлена работа парсера
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 A-Parser Support
Дайджест новостей A-Parser

Для PremiumMix прокси добавлены 3 новых недельных тарифа

• Proxies PremiumMix 50 Gb / 1 week ($0.9 / Gb) - $45
  
• Proxies PremiumMix 100 Gb / 1 week ($0.8 / Gb) - $80
  
• Proxies PremiumMix 200 Gb / 1 week ($0.7 / Gb) - $140
  

Данные тарифы имеют все преимущества Premium тарифов, за исключением возможности гео-таргентинга:

• База более 10 миллионов резидентных (домашних) IP адресов
  
• Быстрое время отклика
  
• Настройки ротации, включая случайный IP на каждый запрос и ротацию от 1 до 60 минут, а также режим Sticky. В режиме Sticky прокси не будет менять IP максимально возможное время
  
• Подходит для браузинга и парсинга, с практически полным отсутствием CAPTCHA и банов
  

Оплата онлайн на a-parser.com. Дополнительная скидка 10% при оплате USDT/BTC/ETH/...

Парсер переводчика Libre Translate
Обновление переводчика Libre Translate, который использует API машинного перевода с открытым исходным кодом

• Адаптация к изменениям в защите
  

Парсинг статистики с Social Blade
Обновление парсера сервис Social Blade, который отслеживает статистику пользователей YouTube, Twitch, Instagram, Facebook и Tiktok.

• Парсер полностью переписан в связи с изменениями на источнике
  
• Добавлен выбор социальной сети, для которой нужно парсить данные
  
• Добавлена возможность указать кол-во страниц с результатами (100 результатов на страницу)
  
• Изменен набор собираемых данных
  

Парсер Яндекс Кью
Обновление парсер для сервиса Яндекс Кью, который позволяет собирать списки вопросов и ответов к ним

• Адаптация к изменениям на источнике
  
• Возвращен выбор типа результатов (вопросы/ответы)
  
• Парсер переписан на TypeScript
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 A-Parser Support
1.2.2670 - адаптация встроенных парсеров к изменениям на источниках, исправление ошибок



Улучшения

• Улучшена работа SE::Bing, на некоторых комбинациях настроек парсер зацикливался на получении Short output
  
• В Browser::ScreenshotsMaker добавлен режим Fullscreen
  

Исправления в связи с изменениями в выдаче

• SE::Google - исправлен парсинг Desktop выдачи
  
• SE::Google - устранен пропуск ссылок на видео
  
• SE::Google - исправлена работа переменных $misspell и $corrected
  
• SE::Google - исправлен парсинг некоторых видов PAA
  
• SE::Yandex - адаптация к изменениям в мобильной выдаче
  
• Исправлена работа Social::Instagram::Tag, теперь для парсинга нужны куки
  
• Исправлена работа SE::Pinterest
  
• SE::Google::Trends - минимизировано количество ошибок, парсер переписан на JS API v2
  
• SE::Bing - исправлена работа с запросами, содержащими поисковые операторы
  

Исправления

• Исправлена работа Net::Whois с некоторыми доменными зонами
  
• В SE::Yandex исправлен парсинг QA
  
• В Social::Instagram::Tag исправлена работа с кириллицей
  
• Исправлена проблема с переподключением к редису в API::Server::Redis, проблема возникала при временной недоступности Redis сервера
  
• Исправлена ошибка кодировки при выводе $query в Начальном тексте, проблема возникала только на Linux
  
• Исправлена работа tools.js, в некоторых случаях функции с npm модулями не работали
  

 A-Parser Support
Дайджест новостей A-Parser

Парсер yep.com
Обновление парсера поисковой системы yep.com

• Адаптация к изменениям на источнике
  
• Улучшена проверка получаемого ответа
  
• В вывод добавлены анкоры и сниппеты
  
• Результат по-умолчанию теперь выводится в CSV
  

Аукцион доменов REG.RU
Обновление парсера аукциона освобождающихся доменов с возможностью фильтрации

• Парсер переписан на JS и адаптирован к изменениям на источнике
  
• Реализован обход защиты
  
• Изменен набор собираемых данных
  

AI content detector
Обновление парсера для проверки текстов на предмет их генерации сервисами ИИ

• Адаптация к изменениям на источнике
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

 A-Parser Support
1.2.2712 - исправления в связи с ужесточением парсинга со стороны Google



Внеочередной релиз, в котором доступны все последние наработки для решения проблем, связанных с ужесточением парсинга со стороны Google.

Также в релиз вошли следующие изменения:

• В SE::Yandex::Register исправлен ряд проблем и добавлена поддержка кук
  
• В Net::HTTP улучшена обработка cookies, добавлена опция Follow meta refresh
  
• Maps::Google адаптирован к изменениям в выдаче
  
• Добавлена поддержка POST запросов при обходе Cloudflare
  
• В парсерах Instagram добавлена возможность указания списка кук
  
• Добавлен автоматический переход на http/1.1 если сервер не поддерживает http2
  
• В Browser::ScreenshotsMaker добавлено открытие/закрытие страницы при каждом запросе вместо открытия/закрытия один раз на поток
  
• Улучшена работа SE::Bing
  

 A-Parser Support
Видео урок: Пробив доменов конкурентов с помощью Net::Whois

Новое видео по работе с A-Parser от DIM STUDIO в котором показано как пробить список доменов на сроки регистрации.



Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

 A-Parser Support
Обновление цен на Proxies Premium



Сравните старые и новые цены: чем больше объём — тем ниже цена за гигабайт.

Proxies Premium Тарифы на 1 неделю:

• 50 ГБ Было: $75 ($1.5 / Gb) Стало: $65 ($1.3 / Gb)
  
• 100 ГБ Было: $140 ($1.4 / Gb) Стало: $120 ($1.2 / Gb)
  
• 200 ГБ Было: $260 ($1.3 / Gb) Стало: $220 ($1.1 / Gb)
  
• 500 ГБ Было: $600 ($1.2 / Gb) Стало: $500 ($1 / Gb)
  

Proxies Premium Тарифы на 1 месяц:

• 50 ГБ Было: $95 ($1.9 / Gb) Стало: $85 ($1.7 / Gb)
  
• 100 ГБ Было: $170 ($1.7 / Gb) Стало: $140 ($1.4 / Gb)
  
• 300 ГБ Было: $450 ($1.5 / Gb) Стало: $390 ($1.3 / Gb)
  
• 500 ГБ Было: $650 ($1.3 / Gb) Стало: $550 ($1.1 / Gb)
  
• 1000 ГБ Было: $1200 ($1.2 / Gb) Стало: $1000 ($1 / Gb)
  
• 3000 ГБ Было: $3300 ($1.1 / Gb) Стало: $3000 ($1 / Gb)
  
• 5000 ГБ Было: $5000 ($1 / Gb) Стало: $4500 ($0.9 / Gb)
  

PremiumMix (No geo targeting) на 1 неделю:

• 50 ГБ Было: $45 ($0.9 / Gb) Стало: $40 ($0.8 / Gb)
  
• 100 ГБ Было: $80 ($0.8 / Gb) Стало: $70 ($0.7 / Gb)
  
• 200 ГБ Было: $140 ($0.7 / Gb) Стало: $120 ($0.6 / Gb)
  

PremiumMix (No geo targeting) на 1 месяц:

• 500 ГБ Было: $300 ($0.6 / Gb) Стало: $250 ($0.5 / Gb)
  
• 1000 ГБ Было: $500 ($0.5 / Gb) Стало: $400 ($0.4 / Gb)
  
• 3000 ГБ Было: $1200 ($0.4 / Gb) Стало: $900 ($0.3 / Gb)

 A-Parser Support
Дайджест новостей A-Parser


Очистка текстов, сгенерированных ИИ

Новый парсер для удаления из текстов признаков их генерации системами ИИ

• Поддерживает запросы в виде текстов, файлов и папок с файлами
  
  
• Позволяет настраивать опции очистки
  
  
• Работает без http запросов и прокси
  
  

Парсинг Авито

Обновление парсера Avito

• Сбор телефонов теперь происходит через браузер
  
  
• Добавлена функция Parse phone max pages, которая задает максимальное количество окон браузера для сбора телефонов.
  
  
• Также исправлены другие проблемы, которые были со сбором: фото, просмотров и локации
  
  

Парсер Google Places

Обновление парсера Google Places

• Добавлено получение cid компании для формирования ссылки на нее в гугл-картах
  
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.


Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.