A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

[A-Parser Support]

1.2.246 - обновление базы Rank::CMS и новые функции в парсерах Baidu и MajesticSEO[url=https://a-parser.com/threads/4614/]


Улучшения

• В Rank::CMS[url=https://a-parser.com/wiki/rank-cms/] обновлена база определяемых движков, теперь поддерживается одновременно старый и новый формат apps.json (при обновлении рекомендуется также обновить apps.json)
• SE::Baidu[url=https://a-parser.com/wiki/se-baidu/] полностью переписан:
  • добавлен парсинг related keywords
  • убран $cachedate из $serp, т.к. его похоже больше нет в выдаче
  • добавлена опция Get full link, преобразующая обрезанные ссылки в полные
  • исправлены некоторые регулярные выражения и баг с двойным http в ссылках
• Изменения в Rank::MajesticSEO[url=https://a-parser.com/wiki/rank-majesticseo/]:
  • Добавлен параметр Check type, позволяет выбрать тип проверки: Root Domain/Subdomin/URL
  • Убран параметр Extract domain
  • Исправлена работа в некоторых случаях
• Улучшена отзывчивость в редакторе JavaScript парсеров
• Улучшена работа HTML::EmailExtractor[url=https://a-parser.com/wiki/html-emailextractor/], устранены зависания, которые возникали на определенных страницах
• Обновлен список регионов в парсерах Яндекс
• Пустой результат в SE::Google::Trends[url=https://a-parser.com/wiki/se-google-trends/] больше не считается неудачным запросом
• Улучшена работа с сессиями в SE::Yandex::WordStat[url=https://a-parser.com/wiki/se-yandex-wordstat/]

Исправления в связи с изменениями в выдаче

• Исправлен парсинг рекламы в SE::Yandex[url=https://a-parser.com/wiki/se-yandex/]
• Исправлена работа, а также улучшен алгоритм парсинга в SE:: DuckDuckGo[url=https://a-parser.com/wiki/se-duckduckgo/]
• Исправлено указание региона в парсерах Яндекс
• Исправлен парсинг $ads.$i.visiblelink в SE::Google::Modern[url=https://a-parser.com/wiki/se-google-modern/]
• Исправлен парсинг $totalcount в SE::Yandex:: Direct[url=https://a-parser.com/wiki/se-yandex-direct/]

Исправления

• Исправлена ошибка, из-за которой процент обработанных запросов мог быть больше 100
• Исправлены ошибки, из-за которых парсинг мог зависать при снятии с паузы, а также сбивался перебор в макросах подстановок
• Исправлено отображение кириллицы в $headers в Net::HTTP[url=https://a-parser.com/wiki/net-http/]
• Исправлена ошибка в Конструкторе результатов, из-за которой в редких случаях парсер мог падать
• Устранена проблема с кодировкой при работе с SQLite
• Исправлена ошибка со сменой прокси в JavaScript парсерах