A-parser 1.1 - продвинутый парсер поисковых систем, suggest, pr, dmoz, whois, etc

Сборник статей #18: вывод в CSV, парсинг номеров телефонов, обзор Collect full region в Maps::Google

Представляем 18-й сборник статей, в который вошли статья о выводе результатов в CSV таблицы, статья об универсальном парсинге номеров телефонов и статья с обзором функции Collect full region парсера Google Maps.

Всё о выводе результатов в CSV (табличное представление результатов)
Табличное представление результатов - это очень популярный вид форматирования данных, собираемых А-Парсером. И чаще всего для этого используется именно формат CSV. В этой статье описаны все варианты и нюансы работы с CSV в контексте A-Parser. А также рассказано чем и как правильно обрабатывать CSV файлы.


Универсальный парсер телефонов
Как известно, номера телефонов проблематично парсить из-за отсутствия единого формата их записи. В этой статье мы поделимся одним из методов универсального парсинга номеров телефонов, а также заодно покажем как можно использовать npm модули без написания JS парсеров.


Детальный обзор Collect full region в Maps::Google
Детальное описание функции Collect full region в парсере Google Карт, варианты ее настройки, рекомендации для наибольшей производительности и сравнение скорости работы парсера на разных прокси.


Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей

 

1.2.2306 - новый парсер подсказок Google Trends, новые опции в существующих парсерах, исправления



Улучшения

• Добавлен новый парсер SE::Google::Trends::Suggest - сбор подсказок Google Trends
  
• Улучшена очистка ссылок в SE::Bing
• В парсер DeepL::Write добавлен выбор стиля и тональности, а также возможность использовать режим исправления
  
• В SE::Yandex добавлен вывод "пропущенных слов"
• В Rank::MajesticSEO добавлен параметр Additional headers for requests without Chrome, который позволяет задать заголовки для запросов без без браузера
• В SE::Yandex::WordStat::ByDate добавлена поддержка нового Wordstat 2
• В SE::Yandex::Register добавлена новая опция OnlineSIM domain которая дает возможность указать домен который будет использоваться в API запросах к OnlineSIM

Исправления в связи с изменениями в выдаче

• Rank::KeysSo - исправлена ошибка заполнения некоторых результатов
  
• Исправлен парсинг $owner_link и $owner_name в парсере Social::Instagram:: Post
• Исправлен парсинг $thumb в Social::Instagram:: Profile
  
• Исправлен парсинг $serp.$i.social в Maps::Yandex
  
• Исправлен парсинг комментариев в SE::YouTube::Video
• Парсер Rank::Ahrefs::KeywordGenerator адаптирован к изменениям на источнике
• SE::Yahoo, Shop::Wildberries:: ProductInfo, SE::Google::Images, Rank::MajesticSEO, SE:: Dogpile::Images, SE:: DuckDuckGo, Cloudflare::Radar

Исправления

• Исправлены падения парсера при использовании определенных запросов в HTML::EmailExtractor
• Исправлена работа повторных попыток для получения robots.txt в Check::BackLink
  
• Исправлен режим Bulk mode в парсерах SE::Google::KeywordPlanner::*