[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход

В этом видео уроке рассмотрен способ создания пресета для анализа сайта в глубину.

В уроке рассмотрено:

• Парсинг в глубину (уровень) сайта относительно страницы запроса при помощи функции "Парсить до уровня"
• Получение title (с очисткой от HTML сущностей)
• Получение таких параметров как:
• кол-во предыдущих редиректов
• код ответа сервера
• кол-во внешних ссылок

Полезные ссылки:

• Вы не можете просматривать ссылки. Регистрация или Вход - готовый пресет в Каталоге
• Вы не можете просматривать ссылки. Регистрация или Вход - подробное описание по созданию настроек для парсинга в глубину сайта
• Вы не можете просматривать ссылки. Регистрация или Вход - документация по функции "Парсить до уровня"
  

Оставляйте комментарии и Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход

[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход
36-й сборник рецептов, в котором опубликованы парсер для проверки текстов на уникальность, парсер GitHub и парсер для получения информации о посещаемости сайтов. А также список обновленных пресетов из нашего Каталога.

Но, в первую очередь хотим поделиться результатами розыгрыша, который был проведен в связи с Черной пятницей. Мы разыграли 5 лицензий на А-Парсер среди всех новых участников нашего Вы не можете просматривать ссылки. Регистрация или Вход, которые присоединились к нему в период проведения акции. Результаты розыгрыша в видео:

А теперь перейдем непосредственно к сборнику.

Вы не можете просматривать ссылки. Регистрация или Вход
Задача проверки текстов на уникальность является одной из самых частых для копирайтеров. Возможность осуществлять такую проверку предоставляют много ресурсов. И парсер для одного из таких сервисов опубликован по ссылке выше.

Вы не можете просматривать ссылки. Регистрация или Вход
Вы не можете просматривать ссылки. Регистрация или Вход
Согласно Википедии, GitHub - это крупнейший веб-сервис для хостинга IT-проектов и их совместной разработки. Поэтому мы не могли обойти его стороной и публикуем парсер данных о репозиториях при поиске по ключевому слову на данном ресурсе.

Вы не можете просматривать ссылки. Регистрация или Вход
Вы не можете просматривать ссылки. Регистрация или Вход
Этот парсер позволяет получать информацию о просмотрах и посещениях страниц за день, месяц и год. В качестве источника данных используется один из известных сервисов.

Вы не можете просматривать ссылки. Регистрация или Вход
Кроме этого были обновлены:

• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход

Еще больше различных рецептов в нашем Вы не можете просматривать ссылки. Регистрация или Вход!
Предлагайте ваши идеи для новых парсеров Вы не можете просматривать ссылки. Регистрация или Вход, лучшие будут реализованы и опубликованы.
Подписывайтесь на Вы не можете просматривать ссылки. Регистрация или Вход - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Вы не можете просматривать ссылки. Регистрация или Вход.
Вы не можете просматривать ссылки. Регистрация или Вход
Вы не можете просматривать ссылки. Регистрация или Вход 

[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход
Вы не можете просматривать ссылки. Регистрация или Вход
Улучшения

• Добавлен новый парсер Вы не можете просматривать ссылки. Регистрация или Вход Вы не можете просматривать ссылки. Регистрация или Вход, который собирает из публичных групп в Telegram данные о сообщениях: текст, дата, автор, ссылки на фото и видео
• Добавлен новый парсер  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, который позволяет парсить поисковую выдачу на ebay.com
• Изменения в парсерах Google:
• Добавлена переменная $detected_geo, в которой содержится информация о геолокации
• В связи с неактуальностью удалены опции:
• Old desktop computer (IE6) в Device
  
• Util::AntiGate preset
  
• Use digit captcha
  

• В  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход увеличено максимальное значение Pages count до 25
• В Вы не можете просматривать ссылки. Регистрация или Вход Вы не можете просматривать ссылки. Регистрация или Вход добавлена поддержка новой верстки
• В  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход добавлена поддержка capmonster.cloud
• Парсер  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход полностью переписан, добавлена поддержка каптч и сессий и добавлен сбор ссылок на кешированные страницы
• Парсер  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход полностью переписан, добавлен сбор тегов и дополнительных ссылок с анкорами
• Добавлен новый инструмент шаблонизатора tools.task, на данный момент он умеет возвращать id задания и число потоков
• JS парсеры: this.query.add теперь поддерживает передачу дополнительных параметров

Исправления в связи с изменениями в выдаче

• Множество исправлений в Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, он теперь полностью дублирует  Вы не можете просматривать ссылки. Регистрация или Вход Вы не можете просматривать ссылки. Регистрация или Вход
• Исправлен парсинг $indexed в Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход
• В Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход исправлена работа с доменной зоной .sex
• Исправлен парсинг $title в Вы не можете просматривать ссылки. Регистрация или Вход  Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход,  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход,  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход, Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход

Исправления

• В парсерах Google исправлена ошибка, при которой собираемые ссылки были с переводчиком
• Исправлены проблемы с рандомизацией в некоторых случаях
• Исправлена ошибка в  Вы не можете просматривать ссылки. Регистрация или ВходВы не можете просматривать ссылки. Регистрация или Вход при парсинге только массивов данных
• Исправлена проблема с проходом по пагинации, которая возникла в одной из предыдущих версий
• JS парсеры: исправлена работа с Node.js модулем socks
  
  
  Вы не можете просматривать ссылки. Регистрация или Вход

[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход
37-й сборник рецептов. В него вошли: парсер Twitter, который умеет собирать сообщения, их авторов и т.п.; JS парсер, в котором объединены поиск и скачивание картинок; а также 2 пресета для парсинга Telegram, которые демонстрируют возможности по сбору данных из публичных групп.

Вы не можете просматривать ссылки. Регистрация или Вход
Публикуем парсер, который по ключевому слову парсит данные из сообщений в Twitter. Собираются имя и логин автора, текст сообщения, дата публикация, количество лайков, ответов и ретвитов. Есть возможность указать количество страниц для парсинга.
Вы не можете просматривать ссылки. Регистрация или Вход
Вы не можете просматривать ссылки. Регистрация или Вход
Ранее мы уже публиковали JavaScript парсер, в котором объединены парсинг выдачи ПС и парсинг текста со страниц. Теперь представляем вашему вниманию JS парсер, в котором объединены поиск и скачивание картинок.
Вы не можете просматривать ссылки. Регистрация или Вход
Пресеты для парсинга публичных групп в Telegram
Начиная с версии 1.2.709 в А-Парсер был добавлен Вы не можете просматривать ссылки. Регистрация или Вход Вы не можете просматривать ссылки. Регистрация или Вход. Для демонстрации его возможностей мы опубликовали в Каталоге 2 пресета:

• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход

Еще больше различных рецептов в нашем Вы не можете просматривать ссылки. Регистрация или Вход!
Предлагайте ваши идеи для новых парсеров Вы не можете просматривать ссылки. Регистрация или Вход, лучшие будут реализованы и опубликованы.
Подписывайтесь на Вы не можете просматривать ссылки. Регистрация или Вход - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Вы не можете просматривать ссылки. Регистрация или Вход.
Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход

[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход

10-й сборник статей, в котором будет показано, как с помощью А-Парсера получать уведомления в Телеграм об изменении цен на товары, как парсить характеристики товаров и выводить их в виде удобной таблицы, а также подробно описана работа с редиректами.

Вы не можете просматривать ссылки. Регистрация или Вход
В этой статье пошагово описан процесс создания парсера, с помощью которого можно отслеживать изменение цен товаров. При этом парсер будет присылать уведомление в Телеграм, а также можно легко добавить поддержку других сайтов.
Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход
Одной из частых задач для А-Парсера является сбор характеристик товаров в интернет-магазинах. И если сам парсинг совсем не проблема, то формирование итоговой таблицы, при условии, что характеристики должны быть распределены по отдельным столбцам, вызывает вопросы. Поэтому, в данной статье будет описан способ такого парсинга.

Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход
Большая справочная статья, посвященная тематике редиректов.
Вы не можете просматривать ссылки. Регистрация или Вход
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь Вы не можете просматривать ссылки. Регистрация или Вход.
Подписывайтесь на Вы не можете просматривать ссылки. Регистрация или Вход - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Вы не можете просматривать ссылки. Регистрация или Вход.
Предыдущие сборники статей

• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход
• Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход

[A-Parser_Support]

Вы не можете просматривать ссылки. Регистрация или Вход

В этом видео уроке рассмотрен способ создания пресета для парсинга тематических доменов по ключевой фразе из поисковой выдачи Google, и получение для доменов различных параметров.

В уроке рассмотрено:

• Парсинг поисковой выдачи Google
• Вывод уникальных результатов в качестве главных доменов
• Получение таких параметров как:
• зарегистрирован домен или нет
• дата регистрации и дата окончания регистрации домена
• язык сайта
• title и description
• индекс качества сайта
• позицию в глобальном рейтинге Alexa
• cтрану с наибольшим числом трафика по Alexa
• позицию в рейтинге этой страны по Alexa

Полезные ссылки:

• Вы не можете просматривать ссылки. Регистрация или Вход - парсер Net::Whois
  
• Вы не можете просматривать ссылки. Регистрация или Вход - парсер HTML::TextExtractor::LangDetect
  
• Вы не можете просматривать ссылки. Регистрация или Вход - парсер SE::Yandex::SQI
  

Оставляйте комментарии и Вы не можете просматривать ссылки. Регистрация или Вход

Вы не можете просматривать ссылки. Регистрация или Вход