|
|
Опции темы | Рейтинг: | Опции просмотра |
|
06.02.2020, 15:45 | #1 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Сборник рецептов #38: парсер Яндекс.Кью, парсер сайтов из Яндекс.Радар и определение типов сайтов
38-й сборник рецептов. В нем опубликованы: парсер сервиса вопросов-ответов Яндекс.Кью, парсер для сбора сайтов из Яндекс.Радара, а также парсер для определения типа сайта. Парсер Яндекс Кью Яндекс.Кью - это сервис вопросов-ответов, запущенный в конце 2019 года. Он объединил в себе несколько других сервисов, поэтому уже на момент запуска обладал большой базой информации. Мы не могли оставить это просто так и публикуем парсер для сбора данных из этого сервиса. Парсинг сайтов из Яндекс.Радар Яндекс.Радар - это сравнительно новый сервис Яндекса, который в отчасти заменил ранее популярный Яндекс.Каталог. Это большой каталог популярных в рунете сайтов с данными о их посещаемости и некоторой информацией о посетителях. Мы подготовили парсер, с помощью которого можно собрать список сайтов с необходимыми фильтрами. Определение типа сайта по Яндекс Радару И еще один парсер для Яндекс.Радар от нашего пользователя. С его помощью можно определять типы сайтов, если они есть в базе Яндекс.Радара. Еще больше различных рецептов в нашем Каталоге! Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы. Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter. Все сборники рецептов |
19.02.2020, 10:37 | #2 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Сборник статей #11: анализ содержимого картинок, добавление ссылок в индекс Google и поиск RSS лент
11-й сборник статей, в котором рассказано, как в А-Парсере анализировать содержимое картинок, добавлять страницы своих сайтов в индекс Google и искать RSS ленты необходимой тематики. Фильтрация картинок по их содержимому В этой статье на примере поиска картинок с определенным содержимым, показана работа с Google Vision. С помощью "компьютерного зрения" для каждого изображения присваивается набор меток, который описывает содержимое. Инструкция по использованию Google Indexing API В данной статье рассмотрена работа с Google Indexing API, который позволяет владельцам сайтов напрямую уведомлять Google о добавлении или удалении страниц. Таким образом ваш сайт будет быстрее просканирован Google, что способствует повышению качества трафика. Поиск и сбор rss лент В этой статье рассмотрен простой пример поиска ссылок на rss ленты по заданной тематике. Решение состоит из 3-х пресетов, каждый из которых отвечает за определенный этап работы. Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь. Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter. Все сборники статей |
02.03.2020, 18:29 | #3 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
1.2.799 - новый парсер для поиска картинок, улучшения в существующих парсерах
Улучшения
|
16.03.2020, 14:28 | #4 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Парсинг booking.com с помощью A-Parser
В этом видео уроке рассмотрен парсинг ресурса booking.com, получение результатов поиска квартир и отелей на сайте. Подробную информацию о них будем получать при помощи парсера Net::HTTP В видео рассмотрено
Полезные ссылки
Оставляйте комментарии и https://www.youtube.com/c/AParser_channel подписывайтесь на наш канал на YouTube! https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ |
26.03.2020, 11:59 | #5 | |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Сборник рецептов #39: бот-опросник, парсер hotline.ua и copart.com
Представляем вашему вниманию 39-й сборник рецептов, в который вошли:
Телеграмм бот опросник Данный бот позволяет организовать ежедневный опрос сотрудников, при этом список вопросов можно гибко менять. Все настройки берутся из Google таблицы, а также туда пишутся ответы по каждому сотруднику. Также, этот пример демонстрирует возможность создания телеграмм бота на базе A-Parser и работу с Google таблицами. Парсер copart.com Copart является одним из крупнейших интернет аукционов, специализирующихся на продаже новых и б/у автомобилей. По официальной информации каждый день на аукционе выставляется на продажу более 150 000 транспортных средств. Еще больше различных рецептов в нашем Каталоге! Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы. Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter. Все сборники рецептов |
|
07.04.2020, 14:39 | #6 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Видео урок: Именование файлов результатов
Мы начинаем публикацию серии коротких видеоуроков, каждый из которых будет посвящен какому-то одному функционалу. И в этом уроке будут рассмотрены варианты формирования имени файла результата. В видео рассмотрено:
Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube! |
17.04.2020, 12:27 | #7 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
1.2.852 - новый парсер для Google Keyword Planner, Native NodeJS, множество исправлений и улучшений
Улучшения ● Добавлен парсер SE::Google::KeywordPlannerИсправления в связи с изменениями в выдаче◦ собираются списки подсказок и варианты ключевых слов● В SE::Yandex::ByImage добавлена функция Get full links to page, которая позволяет получать реальные ссылки на страницы ● Исправлено скачивание каптчи в SE::YandexИсправления ● Исправлена работа Net::Whois с доменами 3го уровня, а также улучшена проверка получаемого ответа |
27.04.2020, 14:33 | #8 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Сборник рецептов #40: посещаемость организаций, SSL сертификаты, ikea и анализ доменов
Представляем вашему вниманию 40-й сборник рецептов, в который вошли:
https://a-parser.com/resources/393/ В поисковой выдаче Google для определенных запросов отображается расширенный сниппет с информацией об организации из Google карт. В частности, обычно отображается информация о посещаемости в разрезе дней недели. Представляем парсер, который собирает данные о посещаемости. Данные по SSL сертификату https://a-parser.com/resources/391/ Данный парсер собирает информацию о SSL сертификате сайта. В качестве источника данных используется сторонний ресурс. Парсер ikea.com https://a-parser.com/resources/388/ Парсер данных из ikea.com, который позволяет собирать различную информацию о товарах. Согласно данным из Википедии, ikea - это одна из крупнейших в мире торговых сетей по продаже мебели и товаров для дома. Кроме этого:
Еще больше различных рецептов в нашем Каталоге! https://a-parser.com/resources/ Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы. Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser). Все сборники рецептов https://a-parser.com/search/39393729/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1% 80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2 https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ |
08.05.2020, 21:38 | #9 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Видео урок: Сохранение результатов в несколько файлов используя переменные, массивы и условия - https://a-parser.com/threads/6139/
В этом видео уроке рассмотрены способы сохранения результатов в несколько файлов, используя переменные и массив, при определенных условиях. В видео рассмотрено:
- https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ |
19.05.2020, 00:47 | #10 |
Пользователь
Регистрация: 01.12.2016
Сообщений: 203
Вы сказали Спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 10
|
Сборник рецептов #41: Google таблицы, отправка писем и авторизация с помощью puppeteer (https://a-parser.com/threads/6168/)
Представляем 41-й сборник рецептов, который полностью посвящен использованию различных Node.js модулей в A-Parser.
Один из часто задаваемых вопросов в поддержке, это вопрос о возможности писать результаты прямо в Google Таблицы. Поэтому мы подготовили небольшой пример парсера, который демонстрирует такую возможность. Отправка почтовых писем (https://a-parser.com/resources/395/) Еще одна возможность, о которой часто спрашивают наши пользователи - отправка писем. Такой функционал может быть использован для уведомлений о различных событиях в заданиях, в том числе о завершении их работы. Поэтому мы также подготовили пример, демонстрирующий отправку писем прямиком из А-Парсера. Авторизация на GitHub с использованием puppeteer (https://a-parser.com/resources/396/) Еще один пример по заявкам наших пользователей, демонстрирующий загрузку страницы, авторизацию на ресурсе и простую навигацию. Еще больше различных рецептов в нашем Каталоге (https://a-parser.com/resources/)! Предлагайте ваши идеи для новых парсеров здесь (https://a-parser.com/threads/3464/), лучшие будут реализованы и опубликованы. Подписывайтесь на наш канал на Youtube (https://www.youtube.com/channel/UCvypGICrfCky8tPtebmIvQw) - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter (https://twitter.com/a_parser). Все сборники рецептов (https://a-parser.com/search/22332632/?q=%D0%A1%D0%B1%D0%BE%D1%80%D0%BD%D0%B8%D0%BA+%D1% 80%D0%B5%D1%86%D0%B5%D0%BF%D1%82%D0%BE%D0%B2) – https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ |