A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

[A-Parser Support]

[URL=https://a-parser.com/threads/4074/]Сборник рецептов #20: автообновление цен в ИМ, анализ текстов и регистрация аккаунтов[/URL]

В 20-м сборнике рецептов наш пользователь glukmaster поделится опытом решения реальной задачи на практике с помощью A-Parser. А также мы будем анализировать тексты и автоматизировать регистрацию аккаунтов Яндекса. Поехали!

[URL=https://a-parser.com/resources/245/]Автоматическое обновление цен 5000 товаров в интернет-магазине на Bitrix[/URL]
Цикл видео из 7 частей, в которых очень детально и наглядно показано, как решать такую задачу, как обновление цен в интернет магазине. Для парсинга используется A-Parser. Посмотреть видео можно по ссылке выше.


[URL=https://a-parser.com/resources/99/]Анализ текста[/URL]
Одним из самых популярных кейсов по применению А-Парсера является парсинг текстов. При этом возникает задача их анализа. Полноценно решить эту задачу позволяют специальные ресурсы. Ранее мы уже публиковали пресет по парсингу одного из таких сервисов. Теперь же это решение полностью переписано в виде JS-парсера, добавлена возможность анализировать не только тексты, а и полностью страницы, т.е. подавать на вход ссылки. Все детали и сам парсер - по ссылке выше.


[URL=https://a-parser.com/resources/240/]Автоматизация регистрации аккаунтов Яндекса[/URL]
Как известно, для парсинга WordStat нужны аккаунты Яндекса. А-Парсер умеет их регистрировать, но их срок жизни невелик, т.к. спустя 1-2 суток включается проверка номера телефона. Поэтому возникает необходимость периодической регистрации новых аккаунтов. И это можно легко автоматизировать. По ссылке выше показано как это сделать.


Кроме этого:

• [URL=https://a-parser.com/resources/244/]Сбор базы e-mail адресов[/URL]
• [URL=https://a-parser.com/resources/239/]Карта сайта и заголовки[/URL]
• [URL=https://a-parser.com/resources/238/]Парсинг Cloudflare-protected emails[/URL]

Еще больше различных рецептов в нашем обновленном [URL=https://a-parser.com/resources/]Каталоге[/URL]!
Предлагайте ваши идеи для новых парсеров [URL=https://a-parser.com/threads/3464/]здесь[/URL], лучшие будут реализованы и опубликованы.
Подписывайтесь на [URL=https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw]наш канал на Youtube[/URL] - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в [URL=https://twitter.com/a_parser]Twitter[/URL].

Предыдущие сборники рецептов:

• [URL=http://a-parser.com/threads/1250/]Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте[/URL]
• [URL=http://a-parser.com/threads/1328/]Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов[/URL]
• [URL=http://a-parser.com/threads/1660/]Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов[/URL]
• [URL=http://a-parser.com/threads/1674/]Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы[/URL]
• [URL=http://a-parser.com/threads/1705/]Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта[/URL]
• [URL=http://a-parser.com/threads/1737/]Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво[/URL]
• [URL=http://a-parser.com/threads/1778/]Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам[/URL]
• [URL=http://a-parser.com/threads/1809/]Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube[/URL]
• [URL=http://a-parser.com/threads/1830/]Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность[/URL]
• [URL=http://a-parser.com/threads/1881/]Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий[/URL]
• [URL=http://a-parser.com/threads/1938/]Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции![/URL]
• [URL=http://a-parser.com/threads/2240/]Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок[/URL]
• [URL=http://a-parser.com/threads/2460/]Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query[/URL]
• [URL=http://a-parser.com/threads/2613/]Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты[/URL]
• [URL=http://a-parser.com/threads/2712/]Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu[/URL]
• [URL=https://a-parser.com/threads/2808/]Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей[/URL]
• [URL=https://a-parser.com/threads/3544/]Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК[/URL]
• [URL=https://a-parser.com/threads/3862/]Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов[/URL]
• [URL=https://a-parser.com/threads/3910/]Сборник рецептов #19: публикация сообщений в Wordpress, парсинг Chrome Webstore и AliExpress[/URL]

Сборники статей:

• [URL=https://a-parser.com/threads/4009/]Сборник статей #1: A-Parser для маркетологов, SEO-специалистов и реальный опыт работы[/URL]

[A-Parser Support]

[URL="https://a-parser.com/threads/4101/#post-13088"]1.2.50 - улучшение стабильности, поддержка Xevil и множество исправлений в стандартных парсерах[/URL]

Улучшения

• Уменьшение потребления памяти и улучшение стабильности работы x64 версий
• Добавлена поддержка 2captcha и Xevil в [URL="https://a-parser.com/wiki/util-recaptcha2/"] Util::ReCaptcha2[/URL]
• Добавлен Parse all results и Parse related to level для [URL="https://a-parser.com/wiki/se-bing/"] SE::Bing[/URL]
• В [URL="https://a-parser.com/wiki/se-bing/"] SE::Bing[/URL] добавлена возможность задавать Safe Search, а также добавлен повтор запроса при получении кешированной "короткой" выдачи
• В [URL="https://a-parser.com/wiki/se-yandex-translate/"] SE::Yandex::Translate[/URL], добавлен обход ограничения на кол-во символов в запросе, что позволяет переводить очень большие запросы (>10k символов)
• В [URL="https://a-parser.com/wiki/se-google-modern/"] SE::Google::Modern[/URL] добавлена возможность задать автоматическое определение языка интерфейса в зависимости от IP
• Движок V8 обновлен до версии 6.4

Исправления в связи с изменениями в выдаче

• Исправлен парсинг сниппетов в [URL="https://a-parser.com/wiki/se-google-modern/"] SE::Google::Modern[/URL] в некоторых случаях
• [URL="https://a-parser.com/wiki/check-roskomnadzor/"] Check::RosKomNadzor[/URL], [URL="https://a-parser.com/wiki/se-aol/"] SE::AOL[/URL], [URL="https://a-parser.com/wiki/se-bing-langdetect/"] SE::Bing::LangDetect[/URL]

Исправления

• Исправлена работа [URL="https://a-parser.com/wiki/se-bing/"] SE::Bing[/URL]:
  • устранена ситуация, когда выдавалась одинаковая выдача для всех страниц
  • исправлена работа параметра Links per page
  • исправлен парсинг количества результатов в некоторых ситуациях
  • исправлена ошибка, при которой не было результатов, если в выдаче одна ссылка
• Исправлена работа с каптчей в [URL="https://a-parser.com/wiki/se-yandex-wordstat/"] SE::Yandex::Wordstat[/URL]
• Исправлена ошибка, когда при запросе с опечаткой [URL="https://a-parser.com/wiki/se-google-modern/"] SE::Google::Modern[/URL] не забирал результаты с первой страницы
• Исправлена ошибка в [URL="https://a-parser.com/wiki/rank-majesticseo/"] Rank::MajesticSeo[/URL], при которой неправильно определялся бан IP
• В [URL="https://a-parser.com/wiki/se-google-trends/"] SE::Google::Trends[/URL] исправлена работа при изменении формата результата по-умолчанию
• В [URL="https://a-parser.com/wiki/se-google-modern/"] SE::Google::Modern[/URL] для Search from country изменен параметр: вместо cr теперь используется gl - это на данный момент позволяет более точно задавать регион
• Исправлена проблема с чрезмерным потреблением памяти в JavaScript парсерах
• Исправлена ошибка влияющая на стабильность работы на Linux и Windows
• Исправлена ошибка в [URL="https://a-parser.com/wiki/se-yandex/"] SE::Yandex[/URL], при которой не было результатов, если в выдаче одна ссылка

Команда A-Parser поздравляет всех с Новым годом и Рождеством! Спасибо что вы с нами!

[A-Parser Support]

[url=https://a-parser.com/threads/4142/]Сборник статей #2: цикл статей-уроков по созданию JS парсеров[/URL]

Как известно, в A-Parser есть возможность создавать свои собственные парсеры, которые могут иметь практически любую логику и в то же время позволяют пользоваться всеми преимуществами А-Парсера. Для написания таких парсеров используется язык JavaScript. В нашей [url=https://a-parser.com/wiki/js-parsers/]документации[/URL] подробно описаны все функции и методы, которые можно использовать при написании парсеров. А в сегодняшнем сборнике мы на практических примерах покажем наиболее часто применяемые функции. Поехали!

1. [url=https://a-parser.com/resources/254/]Получение результатов от стандартного парсера.[/URL]
   В этой статье описано использование функции yield this.parser.request, которая позволяет работать с уже существующими парсерами, получать от них данные и дополнительно обрабатывать их.
2. [url=https://a-parser.com/resources/255/]Парсинг сайта с проходом по страницах.[/URL]
   Здесь показан общий подход к созданию парсера, который будет "ходить" по страницам на сайте и забирать с них некоторую информацию.
3. [url=https://a-parser.com/resources/261/]Парсинг title и description для топ10 сайтов по запросу.[/URL]
   В данном примере показано как написать собственный парсер, который объединит в себе две разных задачи: парсинг топ10 сайтов и парсинг данных из каждого полученного сайта. При этом также будет показана возможность реализации выбора между несколькими поисковиками, что делает такой парсер еще более универсальным.
4. [url=https://a-parser.com/resources/264/]Реализация подстановки запросов и их многопоточной обработки.[/URL]
   Этот пример продемонстрирует, как "на лету" добавлять запросы с помощью tools.query.add, а также, как обрабатывать их в многопоточном режиме.
5. [url=https://a-parser.com/resources/257/]Работа с CAPTCHA.[/URL]
   В этой статье на простом примере будет показан общий подход к работе с сайтами, на которых появляется каптча. Будет пошагово разобран алгоритм и продемонстрирован результат работы.
6. [url=https://a-parser.com/resources/259/]Работа с ReCaptcha2.[/URL]
   А в этом примере по аналогии с обычной каптчей демонстрируется алгоритм работы с рекаптчей, а также вкратце поясняется принцип ее действия.

Для каждой статьи в конце будет продемонстрирован результат работы и дана ссылка на готовый парсер.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь [url=https://a-parser.com/threads/3464/]здесь[/URL].

Подписывайтесь на [url=https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw]наш канал на Youtube[/URL] - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в [url=https://twitter.com/a_parser]Twitter[/URL].

Предыдущие сборники статей

• [url=https://a-parser.com/threads/4009/]Сборник статей #1: A-Parser для маркетологов, SEO-специалистов и реальный опыт работы[/URL]

[A-Parser Support]

[url=https://a-parser.com/threads/4178/]1.2.78 - поддержка сессий в JS парсерах, улучшение SE::Google::Modern, правки в интерфейсе[/url]



Улучшения

• Добавлена поддержка сессий в JavaScript парсерах
• В [url=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/url] добавлена поддержка сессий и улучшена производительность за счет уменьшения частоты появления каптч/рекаптч
• Добавлена переменная $query.prev - показывает запрос, который использовался на предыдущем уровне
• Для JS парсеров добавлен метод this.logger.putHTML, который позволяет вывести в лог HTML код
• В Lite версию добавлен[url=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/url] и [url=https://a-parser.com/wiki/util-recaptcha2/]Util::ReCaptcha2[/url]
• В x86 версиях добавлено предложение перейти на x64
• Добавлена возможность переименовывания пресетов
• В окне выбора пресета для папок реализована "память на сворачивание"
• Изменены иконки для JS парсеров
• Исправлены ошибки с переводом в интерфейсе
• Исправлено отображение HTML тегов в логах
• Исправлен баг при импорте с вложенным парсером
• Исправлен баг с прокруткой при сохранении JS парсеров и пресетов
• Доработан Конструктор регулярных выражений
• Другие мелкие правки в интерфейсе, направленные на улучшение общей работы

Исправления в связи с изменениями в выдаче

• В [url=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/url] исправлен парсинг сниппетов и рекламы, а также мобильной выдачи
• В [url=https://a-parser.com/wiki/se-google-suggest/]SE::Google::Suggest[/url] исправлен парсинг подсказок, а также добавлена опция Remove HTML tags, позволяющая получать подсказки с или без html тегов
• Исправлен парсинг анкоров и сниппетов в [url=https://a-parser.com/wiki/se-duckduckgo/]SE :: DuckDuckGo[/url]
• [url=https://a-parser.com/wiki/se-ask/]SE::Ask[/url], [url=https://a-parser.com/wiki/se-dogpile/]SE :: Dogpile[/url], [url=https://a-parser.com/wiki/rank-mustat/] Rank::Mustat[/url]

Исправления

• Исправлен баг с перемещением заданий в очереди
• В [url=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/url] исправлен баг с кодировкой
• Исправлена работа параметров Request delay и Extra query string во всех JS парсерах
• Исправлен выбор файлов запросов
• Исправлено отображение иконок для JS парсеров

[A-Parser Support]

[URL="https://a-parser.com/threads/4208/"]Видео урок: Создание JS парсеров. Получение результатов от стандартного парсера[/URL]

Это видео начинает цикл уроков по созданию JavaScript парсеров. Здесь рассказано о том, как начать писать собственные парсеры, используя функционал JS парсеров в А-Парсере.



В уроке рассмотрено:

• Создание кастомного JS парсера
• Использование встроенного парсера внутри JS парсера
• Парсинг выдачи поисковой системы с фильтрацией результатов по заданному условию

Полезные ссылки:

• [URL="https://learn.javascript.ru/generator"]https://learn.javascript.ru/generator[/URL]
• [URL="https://developer.mozilla.org/ru/docs/Web/JavaScript/Guide/Iterators_and_Generators"]https://developer.mozilla.org/ru/docs/Web/JavaScript/Guide/Iterators_and_Generators[/URL]
• [URL="https://developer.mozilla.org/ru/docs/Web/JavaScript/Reference/Operators/yield"]https://developer.mozilla.org/ru/docs/Web/JavaScript/Reference/Operators/yield[/URL]

Статья и готовый парсер: [URL="https://a-parser.com/resources/254/"]https://a-parser.com/resources/254/[/URL]

Оставляйте комментарии и [URL="https://www.youtube.com/c/AParser_channel"]подписывайтесь на наш канал на YouTube![/URL]

[A-Parser Support]

[url=https://a-parser.com/threads/4243/]Видео урок: Создание JS парсеров. Парсинг сайта с проходом по страницах[/url]

Второе видео в цикле уроков по созданию JavaScript парсеров. Здесь рассказано о том, как написать несложный парсер сайта, который будет "листать" страницы, используя функционал JS парсеров в А-Парсере.

[url=https://

В уроке рассмотрено:

• Создание кастомного JavaScript парсера без использования встроенных парсеров
• Парсинг контента сайта постранично с использованием регулярных выражений
• Реализация прохода по страницам ("пагинации") в JS парсере

Статья и готовый парсер: [url=https://a-parser.com/resources/255/]https://a-parser.com/resources/255/[/url]

Оставляйте комментарии и [url=https://www.youtube.com/c/AParser_channel]подписывайтесь на наш канал на YouTube![/url]

[A-Parser Support]

1.2.138 - поддержка Node.js модулей, обработка ReCaptcha2 во всех парсерах Google, парсер AliExpress



В A-Parser 1.2.138 добавлена эмуляция node версии 8.9.x с поддержкой загрузки модулей и частичной реализацией fs и net модулей. Это дает возможность обращаться из JavaScript парсеров напрямую к файловой системе, а также использовать подключение по TCP из модулей к другим сервисам(например mysql, redis, chrome...).

Все это позволило загружать и использовать node модули из каталога npm, в котором собраны множество полезных библиотек для обработки данных, коннекторы к базам данных и множество других интересных вещей. На данный момент протестированы следующие модули: md5, async-redis, jsdom, puppeter.

Улучшения

• Добавлена поддержка Node.js модулей в JavaScript парсерах
• SE::Google::Position, SE::Google::Compromised и SE::Google::TrustCheck полностью переписаны, добавлена поддержка ReCaptcha2
• Улучшена работы SE::Google::Modern в целом
• В SE::Youtube добавлен выбор языка, а также реализована возможность включать/отключать Безопасный режим
• Добавлен Shop::AliExpress
• Улучшена проверка создаваемых переменных в пресетах
• Улучшена работа сессий
• Исправлено отображение имени файла запроса на карточке задания
• Улучшена работа скрола в Тестовом парсинге
• Добавлено удаление переносов из сниппетов в SE::Google::Modern
• Картинка каптчи в парсере SE::Yandex::Register теперь скачивается через прокси
• Множество мелких улучшений в интерфейсе

Исправления в связи с изменениями в выдаче

• Исправлена работа SE::Youtube при переопределении опции Result type
• Исправлен многостраничный парсинг в SE::Bing
• Полностью переписан SE::Yandex::Register, добавлена возможность выводить ответ на секретный вопрос
• Исправлена проверка следующей страницы в SE::Seznam
• Устранена ситуация, когда в SE::Yandex::Position парсилась неполная ссылка
• Исправлен подсчет неудачных запросов в SE::Google::TrustCheck и SE::Google::Compromised
• SE::Yandex::Direct, Shop::Yandex::Market

Исправления

• Исправлена работа Конструктора регулярных выражений
• Исправлена работа с кодировками в парсерах переводчиков и JS парсерах
• Исправлена работа SE::Google::Position
• Исправлен выбор региона в SE::Yandex::Direct
• Исправлена работа опции Location в SE::Google::Modern
• Исправлена работа сессий в SE::Google::Modern] при переопределенном домене
• Исправлена ошибка при совместном использовании опций Перезаписи файла, Начального и Конечного текстов
• Исправлено отображение вкладок в Тесте задания
• Исправлено отображение списка пресетов в поле Запустить по завершению
• Исправлена работа this.proxy.set в JS парсерах
• Исправлена передача дополнительных параметров в JS парсерах
• Исправлена ошибка, из-за которой через API нельзя было указать Начальный и Конечный тексты
• Исправлен экспорт пресетов

[A-Parser Support]

Использование Xevil совместно A-Parser для разгадывания ReCaptcha2



Как известно, сейчас Google при парсинге очень часто выдает рекаптчу, что значительно усложняет и замедляет сбор данных.
В A-Parser есть возможность обходить данную проблему, разгадывая рекаптчу с помощью сторонних сервисов. Поддерживаются различные онлайн сервисы, а также программные решения.

Одним из таких решений есть XEvil. Его использование дает хороший прирост в скорости, а также значительно удешевляет парсинг, ведь здесь нету оплаты за количество разгаданных каптч/рекаптч, как в онлайн сервисах. Кроме этого, XEvil умеет разгадывать практически любые обычные каптчи (в виде картинки) и данная возможность также поддерживается в A-Parser.



На данный момент использовать разгадывание рекаптчи с помощью XEvil можно в таких парсерах:

• SE::Google::Modern
• SE::Google::Position
• SE::Google::TrustCheck
• SE::Google::Compromised
• Rank::MegaIndex
• а также любые кастомные JavaScript парсеры

В видео показано:

• подключение Xevil к A-Parser для работы с ReCaptcha2
• проверка работы и демонстрация работы в SE::Google::Modern

Ознакомиться более детально с возможностями XEvil можно по ссылкам:

• http://www.botmasterlabs.net/
• http://xevil.net/ru/

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

[A-Parser Support]

Сборник рецептов #21: уведомления в Telegram из A-Parser, мультифильтр и парсинг IMDb

21-й сборник рецептов. В нем мы научимся отправлять сообщения в Telegram прямо из A-Parser, изучим работу с модулями Node.js в JS парсерах на примере решения задачи фильтрации по множеству признаков, а также спарсим весь IMDb. Поехали!

Уведомления в Telegram из A-Parser

Telegram является одним из самых популярных мессенджеров благодаря своей простоте, и в то же время большому функционалу. Среди прочего, в Телеграме можно создавать ботов, с помощью которых можно делать чаты более интерактивными. Взаимодействие с ботом на на стороне сервера происходит через Telegram Bot API. Используя эти возможности, можно легко и буквально за несколько минут настроить уведомления себе в Telegram прямо из парсера. О том, как это сделать, а также несколько реальных примеров - по ссылке выше.




Фильтрация по множеству признаков

Как известно, для фильтрации в А-Парсере используется встроенный функционал фильтров. Но бывают ситуации, когда список признаков, наличие которых нужно проверять, очень большой и его сложно вписать в строку стандартного фильтра.
Начиная с версии 1.2.127 в A-Parser добавлена поддержка модулей Node.js. Благодаря этому появилась возможность читать список признаков из файла и использовать его для проверки страниц. О том, как это сделать, а также готовый парсер с мультифильтром - по ссылке выше.



Парсинг рекомендаций фильмов из IMDb

Пример решения задачи по сбору данных о фильмах и их рекомендаций на IMDb. Данная статья показывает, как можно решать задачи, которые на первый взгляд требуют много времени и ресурсов, буквально за несколько часов. Узнать о том, как спарсить весь IMDb за 1,5 часа, а также посмотреть пресет и забрать готовую базу можно по ссылке выше.



Еще больше различных рецептов в нашем обновленном [URL=https://a-parser.com/resources/]Каталоге[/URL]!
Предлагайте ваши идеи для новых парсеров здесь(https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter

• Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте
• Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов
• Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов
• Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы
• Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта
• Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво
• Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам
• Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube
• Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность
• Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий
• Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции!
• Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок
• Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query
• Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты
• Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu
• Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей
• Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК
• Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов
• Сборник рецептов #19: публикация сообщений в Wordpress, парсинг Chrome Webstore и AliExpress
• Сборник рецептов #20: автообновление цен в ИМ, анализ текстов и регистрация аккаунтов

Сборники статей:

• Сборник статей #1: A-Parser для маркетологов, SEO-специалистов и реальный опыт работы
• Сборник статей #2: цикл статей-уроков по созданию JS парсеров

[A-Parser Support]

1.2.160 - поддержка SQLite, проверка доменов на клей, Parse all results в SE::Yahoo


Улучшения

• Добавлена поддержка SQLite в JavaScript парсерах и шаблонизаторе, пример использования
  
• Добавлена защита от случайного закрытия окна парсера
  
• В SE::Yahoo добавлены Parse all results и Parse related to level
  
• полностью переписан, добавлена возможность проверять домены на клей
  
• В Rank::MegaIndex добавлена поддержка ReCaptcha2
• Улучшен парсинг сниппетов в SE:: DuckDuckGo
• Улучшен сбор почт в HTML::EmailExtractor

Исправления в связи с изменениями в выдаче

• Обновлен алгоритм Bypass Cloudflare
  
• SE::Bing::Translator почти полностью переписан в связи с изменением логики работы переводчика Bing
  
• Исправлена работа SE::Seznam с некоторыми видами запросов
  
• Исправлен парсинг related keywords, а также мобильной выдачи в SE::Google::Modern
  
• Исправлен парсинг related keywords в SE::Bing
  
• Исправлена работа при работе с русскоязычными запросами
• SE::Yandex:: Direct, SE::Google::ByImage, SE::Yandex::WordStat

Исправления

• Исправлена работа SE::Google::Modern на IPv6 прокси
• Исправлена ошибка, из-за которой SE::Google::Modern собирал ссылки с пометкой опасных сайтов в общий массив ссылок
  
• Исправлена работа с оператором поиска + в SE::Bing
  
• Исправлен парсинг запросов со спецсимволами в SE:: DuckDuckGo
  
• Исправлена работа Rank::MajesticSEO
• Исправлен баг с overrideOpts в JS парсерах
  
• Исправлена работа с переменными при их создании в Parse custom results, а также при использовании нижнего подчеркивания в именах в Конструкторе результатов
• Исправлена работа tools.js, баг появился в одной из предыдущих версий
• Исправлен баг, из-за которого А-Парсер падал на некоторых ОС, появился в одной из предыдущих версий