IPB

Здравствуйте, гость ( Вход | Регистрация )

7 страниц V  « < 3 4 5 6 7 >  
Ответить в данную темуНачать новую тему
 A-parser - продвинутый парсер ПС, Pr, Wordstat, всего более 35 парсеров!, Google, Yandex, Bing, Suggest, PR, Whois, AOL, Alexa, MajesticSEO...
A-Parser Support
сообщение 25.5.2016, 6:53
Сообщение #81


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



1.1.532 - парсинг регистратора в Whois, множество исправлений

Улучшения



Исправления в связи с изменениями в выдачи



Исправления

  • Исправлено падение при использовании JavaScript(tools.js) на Windows, также исправлена некорректная работа на Linux
  • Исправлена проблема с логином на некоторых аккаунтах Яндекса
  • Исправлено определение ранка в парсере (IMG:http://a-parser.com/img/parsers/rank-alexa.png) Rank::Alexa для доменов с www.
  • Исправлена работа с некоторыми доменными зонами в парсере (IMG:http://a-parser.com/img/parsers/net-whois.png) Net::Whois, а также отображение статуса для некоторых зон
  • Исправлено падение (IMG:http://a-parser.com/img/parsers/rank-cms.png) Rank::CMS при использовании опции -nofork
  • Исправлены проблемы в работе нового прокси чекера: отключение чекера при изменении настроек, переопределение чекера в задании, а также проблема с отображением в некоторых браузерах
  • Исправлена работа опции Prepend/Append text в некоторых случаях
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 8.6.2016, 8:13
Сообщение #82


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.566 - кэширование запросов, удобная работа с настройками, множество улучшений

(IMG:http://a-parser.com/img/scr/grf1e.png)
Улучшения

  • Теперь для парсеров (IMG:http://a-parser.com/img/parsers/net-http.png) Net::HTTP, (IMG:http://a-parser.com/img/parsers/html-textextractor.png) HTML::TextExtractor, (IMG:http://a-parser.com/img/parsers/html-linkextractor.png) HTML::LinkExtractor, (IMG:http://a-parser.com/img/parsers/rank-cms.png) Rank::CMS кэшируются одинаковые HTTP запросы при использовании любой комбинации из этих парсеров в одном задании, что исключает выполнение повторных запросов к одному URL, как следствие растет скорость, уменьшается нагрузка на целевые сайты
  • Добавлена опция Max connections per host позволяющая ограничить максимальное число одновременных подключений к одному домену/IP
  • Добавлена опция Global proxy ban позволяющая расшарить статистику по бану проксей между заданиями
  • В парсере (IMG:http://a-parser.com/img/parsers/html-linkextractor.png) HTML::LinkExtractor улучшено отображение табличных данных и списков
  • В парсере (IMG:http://a-parser.com/img/parsers/se-yandex-wordstat.png) SE::Yandex::WordStat добавлена возможность указать минимальную частотность для добавления запроса на вложенный парсинг
  • В парсере (IMG:http://a-parser.com/img/parsers/se-yandex.png) SE::Yandex добавлена опция Parse all results позволяющая автоматически обходить ограничение на размер выдачи и собирать гораздо больше результатов
  • В редакторе заданий добавлена функция Copy overrides позволяющая копировать настройки из одного парсера в другой
  • В редакторе заданий добавлена функция Save overrides to preset позволяющая создать новый пресет на основе переопределенных значений
  • При просмотре логов с опцией "Только неудачные" теперь отображаются только те потоки, в которых были неудачные запросы
  • При использовании xPath совместно с сохранением отдельных запросов в один массив данные заполняются равномерно
  • В очереди заданий добавлена дата последнего изменения задания при отображении в компактном виде
  • В очереди заданий добавлена возможность скачать файл результатов при незавершенном парсинге
  • При использовании опции "Сохранять неудачные запросы" теперь дополнительно сохраняются оригинальные запросы для всего задания
  • Добавлена опция Report captcha - распознанные Google каптчи отправляются на наш сервер для анализа, включена по умолчанию

Исправления в связи с изменениями в выдаче

Исправления
  • Исправлена проблема с большим потреблением памяти на ОС Windows
  • Исправлено неверное сохранение параметра уникализации в некоторых случаях
  • Не работала замена на группы в регулярных выражениях в Конструкторе запросов
  • В парсер HTML::LinkExtractor исправлен парсинг ссылок с пробелами
  • Исправлена проблема с отображением заданий в очереди с большим числом запросов добавленных через текстовое поле
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 23.6.2016, 3:20
Сообщение #83


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser: видео урок - парсим Rambler с XPath

Денис Бартаев рассказывает, как в несколько кликов создать парсер любой поисковой системы на примере Rambler.ru. Мы получим всю необходимую информацию: ссылки, анкоры, сниппеты, число результатов, связанные ключевые слова и проверку на опечатку в запросе.

(IMG:http://a-parser.com//img/scr/8TsjQ.png)

В уроке рассмотрены
  • Использование XPath для создания кастомного парсера
  • Обход капчи без использования Antigate
  • Использование Template toolkit для форматирования результата
  • Объединение результатов парсинга в массив объектов с полями, связанными по индексу


Подписывайтесь на наш канал!

Оставляйте в комментариях свои идеи и пожелания для будущих видео
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 6.7.2016, 7:19
Сообщение #84


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.582 - множество исправлений поисковых систем

Улучшения
  • В очереди заданий теперь запоминается текущая страница отдельно для активных и завершенных задач
  • Добавлена возможность вывести время выполнения каждого запроса

Исправления в связи с изменениями в выдаче

Исправления
  • Улучшена обработка кодировки текста в (IMG:http://a-parser.com/img/parsers/html-textextractor.png) HTML::TextExtractor
  • В очереди заданий в некоторых случаях могли не отображаться кнопки управления заданием



Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты

14-й выпуск Сборника рецептов. Сегодня мы научимся делать кастомные парсеры с помощью XPath, будем анализировать страницы сайта и попробуем делать комбинированные пресеты. Кроме этого ниже обновление 2-х самых популярных пресетов и небольшой сюрприз (IMG:http://4seo.biz/style_emoticons/default/smile.gif) Поехали!

Быстрое создание кастомного парсера поисковой системы с помощью XPath
В A-Parser есть парсеры для большинства популярных поисковых систем. Но реализовать и поддерживать парсеры для абсолютно всех существующих поисковиков очень сложно, поэтому нам на помощь приходит Net::HTTP с его замечательной возможностью парсить практически все. В данной статье речь пойдет о том, как с помощью XPath и Net::HTTP довольно быстро и легко создать кастомный парсер почти любой поисковой системы. Подробности - по ссылке выше.
(IMG:http://img.a-parser.com/24i2E.png)

Анализ всех страниц сайта
Администраторы сайтов и SEO-специалисты довольно часто сталкиваются с задачей анализа и мониторинга всех страниц сайта. Ранее мы уже публиковали Универсальный чекер страниц, который позволяет проверить доступность страниц на сайте. Теперь мы предоставляем вашему вниманию пресет для анализа всех страниц, который выводит глубину, время ответа, код и статус ответа, размер страницы и, если есть редирект, то конечный адрес редиректа. Все детали и пресет - по ссылке выше.
(IMG:http://a-parser.com//img/scr/Am98N.png)

Как сделать парсинг и скан сайтов в одном пресете
Возможность использовать несколько парсеров в одном задании - это одно из преимуществ А-Парсера. Простая демонстрация такого функционала показана по ссылке выше.
(IMG:http://a-parser.com//img/scr/zuca4.png)

Кроме этого:
  • Обновлен пресет парсинга Авито
  • По многочисленным просьбам полностью переделан пресет парсинга 2GIS. Теперь он еще быстрее! А для тех, кто внимательно читает наши статьи - в посте есть небольшой подарок: полная база 2GIS.


Еще больше различных рецептов в нашем Каталоге примеров!

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Предыдущие сборники
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 20.7.2016, 7:31
Сообщение #85


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.594 - Улучшение скорости парсинга Google в 10-20 раз

(IMG:http://a-parser.com/img/scr/h1sij.png)

После ужесточения парсинга со стороны гугла A-Parser стал парсить его быстрее чем раньше, результаты тестирования парсинга в 1000 потоков, 1 страница по 100 результатов - более 4000 запросов в минуту

(IMG:http://a-parser.com/img/scr/3efgi.png)

Улучшения
  • Переработан парсер (IMG:http://a-parser.com/img/parsers/se-google.png) SE::Google - увеличена скорость парсинга в 10-20 раз
  • Названия пресетов заданий теперь сортируются при добавлении

Исправления
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 17.8.2016, 4:03
Сообщение #86


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.619 - большая оптимизация потребления памяти, увеличение скорости парсинга Яндекса

(IMG:http://a-parser.com/img/scr/28wkr.png)

В этой версии проделана большая работа по оптимизации потребления памяти, а также стабильной работе парсера 24/7 с множеством числом заданий

Улучшения
  • Уменьшение потребления памяти
  • Оптимизация парсера (IMG:http://a-parser.com/img/parsers/se-yandex.png) SE::Yandex - увеличение предельной скорости парсинга в 2.5 раза(~1500 запросов минуту, i7-4770)

Исправления в связи с изменениями в выдаче

Исправления
  • Исправлен (IMG:http://a-parser.com/img/parsers/se-google.png) SE::Google при работе с антигейтом: неверная обработка запросов со скобками и очень длинных запросов
  • Исправлен Net::HTTP - при выполнении цепочки редиректов теперь передается оригинальный реферер
  • Исправлена работа с сессиями в (IMG:http://a-parser.com/img/parsers/se-yandex-wordstat.png) SE::Yandex::WordStat
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 5.9.2016, 12:50
Сообщение #87


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.626 - парсер Яндекс картинок, поддержка каптчи при логине в Яндекс, удаление нерабочих аккаунтов

(IMG:http://a-parser.com/img/scr/eosv5.png)

В версии 1.1.626 добавлена поддержка каптчи при логине в Яндекс аккаунт в парсерах (IMG:http://a-parser.com/img/parsers/se-yandex.png) SE::Yandex, (IMG:http://a-parser.com/img/parsers/se-yandex-wordstat.png) SE::Yandex::WordStat и (IMG:http://a-parser.com/img/parsers/se-yandex-direct-frequency.png) SE::Yandex::Direct::Frequency:

(IMG:http://a-parser.com/img/scr/5nwml.png)

Также для этих парсеров добавлена настройка Remove bad accounts, которая автоматически удаляет аккаунты с неверным логин/паролем или требующие подтверждения по телефону. Опция включена по умолчанию

Добавлен новый парсер картинок (IMG:http://a-parser.com/img/parsers/se-yandex-images.png) SE::Yandex::Images, поддерживает все фильтры(размер, ориентация, тип, цвет, тип файла...). Как известно Яндекс отлично индексирует все картинки для взрослых - отличный способ набрать контента для своих доров/тюбов. В дополнении есть возможность выставить безопасный поиск

(IMG:http://a-parser.com/img/scr/2cgwv.png)

Парсер Яндекс картинок также поддерживает работу с антигейтом(anti-captcha, rucaptcha, CapMonster - любой сервис с поддержкой API антигейта)

Исправления в связи с изменениями в выдачи
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 20.9.2016, 5:01
Сообщение #88


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu

15-й выпуск Сборника рецептов. В нем мы будем парсить Google PageSpeed Insights, который позволяет оценивать скорость загрузки, юзабилити сайтов и даже получать их скриншоты; сделаем кастомный парсер Яндекс.Картинок и научимся получать полные ссылки из выдачи Baidu. Поехали!

Анализ скорости загрузки и юзабилити сайтов
У Google есть довольно неплохой сервис PageSpeed Insights, который измеряет скорость загрузки веб-страниц, оценивает их юзабилити и даже делает скриншоты страниц. При этом оценивается обычная и мобильная версия парсера. Поэтому мы не могли обойти стороной такой сервис и не сделать для него парсер. О том, что получилось - читайте по ссылке выше.
(IMG:http://files.a-parser.com/img/BN5wQ.png)

Кастомный парсер Яндекс Картинок
На форуме неоднократно спрашивали когда в А-Парсер будет добавлен парсер картинок Яндекса. На данный момент такой парсер уже есть: (IMG:http://a-parser.com/img/parsers/se-yandex-images.png) SE::Yandex::Images. Но в данной статье будет показан пример кастомного парсера Яндекс.Картинок, который довольно хорошо демонстрирует возможности (IMG:http://a-parser.com/img/parsers/net-http.png) Net::HTTP. Подробности - по ссылке выше.
(IMG:http://files.a-parser.com/img/SjOA0.png)

Как получить полные ссылки из Baidu
Также довольно часто спрашивают как получить полные ссылки из Baidu. Дело в том, что этот поисковик обрезает ссылки в выдаче, и на выходе получаются ссылки такого вида:
Цитата

Поэтому в данной статье будет показан способ получения полных ссылок с помощью A-Parser.
(IMG:http://files.a-parser.com/img/66pko.png)

Кроме этого:


Еще больше различных рецептов в нашем Каталоге примеров!

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Предыдущие сборники:
Перейти в начало страницы
 
+Цитировать сообщение
dim7
сообщение 26.9.2016, 13:20
Сообщение #89


Ветеран
****

Группа: Кандидат
Сообщений: 462
Регистрация: 2.5.2007
Пользователь №: 161
Вставить ник
Цитата



А сюда, часом не твой постер пишет? (IMG:http://4seo.biz/style_emoticons/default/wink.gif)
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 28.9.2016, 4:58
Сообщение #90


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.652 - динамический лимит потоков, поддержка цифровой каптчи для Google

(IMG:http://a-parser.com/img/scr/dw290.png)

В версии 1.1.652 добавлена поддержка динамического лимита потоков, позволяющая распределить лимит между всеми запущенными заданиями, тем самым увеличивается общая скорость выполнения заданий в очереди

Помимо этого парсер (IMG:http://a-parser.com/img/parsers/se-google.png) SE::Google теперь поддерживает работу с цифровыми каптчами, а сервис Cheap-Captcha предоставил пользователям A-Parser уникальную скидку: всего 25 центов за 1000 распознанных каптч

Улучшения

Исправления в связи с изменениями в выдачи

Исправления
Перейти в начало страницы
 
+Цитировать сообщение
Forbidden
сообщение 28.9.2016, 5:03
Сообщение #91


Участник
**

Группа: Кандидат
Сообщений: 13
Регистрация: 18.7.2007
Пользователь №: 347
Вставить ник
Цитата



Цитата(dim7 @ 26.9.2016, 14:20) *
А сюда, часом не твой постер пишет? (IMG:http://4seo.biz/style_emoticons/default/wink.gif)


эх, раскусил (IMG:http://4seo.biz/style_emoticons/default/crazy.gif)
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 13.10.2016, 12:07
Сообщение #92


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Новые видео уроки: от покупки до настройки и запуска задания

Смотрите новые видео уроки от Дениса Бартаева, подписывайтесь на наш канал!

A-Parser: обзор личного кабинета и процесса оплаты

(IMG:http://a-parser.com//img/scr/I4EjL.png)

A-Parser: установка, запуск и обновление

(IMG:http://a-parser.com//img/scr/vPiqb.png)

A-Parser: настройка, добавление прокси, запуск задания

(IMG:http://a-parser.com//img/scr/GbGs8.png)

Оставляйте в комментариях пожелания для будущих видео!
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 25.10.2016, 5:44
Сообщение #93


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.669 - 64 битная Linux версия, проверка позиций по множеству доменов

(IMG:http://a-parser.com/img/scr/sqz76.png)

Начиная с версии 1.1.669 A-Parser доступен в 64 битной версии для Linux, основные преимущества:
  • уменьшение потребления памяти
  • больше нет ограничений на максимальное потребление памяти в 4Гб, что позволит запускать больше заданий одновременно и в большее число потоков

Напоминаю что A-Parser одинаково хорошо работает на Windows, Linux и FreeBSD

Другая хорошая новость - сервис Cheap-Captcha.com дарит всем пользователям A-Parser'а $5 на разгадывание 20000 каптч для Google или Яндекса

Улучшения

Исправления в связи с изменениями в выдаче

Исправления
  • В предыдущий версии появилась ошибка в обработке нескольких ключевых слов за один запрос в парсере (IMG:http://a-parser.com/img/parsers/se-yandex-direct-frequency.png) SE::Yandex::Direct::Frequency
  • Очистка очереди заданий работала некорректно
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 7.11.2016, 10:44
Сообщение #94


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей

16-й выпуск Сборника рецептов. В нем мы научимся парсить OpenSiteExplorer с авторизацией, попробуем забирать все сайты из Яндекс.Каталога и сделаем парсер Яндекс.Новостей. Поехали!

Парсинг OpenSiteExplorer (MOZ) с авторизацией
С помощью рассмотренного в статье способа, можно парсить OSE с авторизацией, что в свою очередь позволяет обходить ограничение на 10 запросов с одного IP в сутки. Плюс ко всему, значительно расширен набор возвращаемых параметров по сравнению со стандартным парсером. Кроме этого, можно совсем не использовать прокси, что дает значительный прирост в скорости! Сам пресет и описание - по ссылке выше.
(IMG:http://files.a-parser.com/img/cgqJw.png)

Парсинг всех сайтов из указанной категории Я.Каталога
Многие пользователи A-Parser неоднократно спрашивали о возможности спарсить все сайты из Яндекс.Каталога. Поэтому мы публикуем сам пресет и подробное описание процесса его создания и работы. Все это - по ссылке выше.
(IMG:http://files.a-parser.com/img/J4pYc.png)

Как парсить Яндекс.Новости?
В А-Парсере в стандартном парсере Google можно парсить новости. А вот для Яндекса на данный момент нету такой возможности. Но решается это довольно просто. Как именно - читайте по ссылке выше. Плюс бонусом небольшой пресет для парсинга подсказок из Я.Новостей - еще один способ парсить ключевые слова (IMG:http://4seo.biz/style_emoticons/default/smile.gif)
(IMG:http://files.a-parser.com/img/t52pd.png)

Кроме этого:



Еще больше различных рецептов в нашем Каталоге примеров!

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 15.11.2016, 5:22
Сообщение #95


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



A-Parser - 1.1.681 - обход защиты CloudFlare, улучшения в конструкторах запросов

(IMG:https://a-parser.com/img/scr/pz888.png)
В версии A-Parser 1.1.681 добавлен автоматический обход проверки CloudFlare на браузер, тем самым позволяя собирать информацию с сайтов под защитой самого популярного облачного провайдера. Работает в парсерах (IMG:http://a-parser.com/img/parsers/net-http.png) Net::HTTP, (IMG:http://a-parser.com/img/parsers/html-linkextractor.png) HTML::LinkExtractor и (IMG:http://a-parser.com/img/parsers/html-textextractor.png) HTML::TextExtractor

В конструкторах запросов улучшена логика при разделении запроса на части

Исправления в связи с изменениями в выдачи

Исправления
  • Исправлена поддержка тега meta http-equiv в парсере (IMG:http://a-parser.com/img/parsers/net-http.png) Net::HTTP
  • Теперь x64 Linux версия A-Parser запускается на всех современных дистрибутивах
  • В парсере (IMG:http://a-parser.com/img/parsers/se-yandex-direct-frequency.png) SE::Yandex::Direct::Frequency исправлена ошибка, которая могла приводить к зацикливанию запросов
  • Исправлена ошибка в Тестировщике заданий, при которой не очищался результат предыщущего парсинга
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 1.12.2016, 10:54
Сообщение #96


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Доброго времени суток, друзья!


Отныне в A-Parser добавлена уникальная возможность создавать свои парсеры на языке java script:


(IMG:https://a-parser.com/img/scr/s81f4.png)


Давайте более подробно рассмотрим нововведения:
  • теперь возможна реализация парсеров, регеров, постеров и т.п. любого уровня сложности, используя все преимущества A-Parser
  • API будет дорабатываться и пополняться полезными возможностями
  • для тех кто уже готов пользоваться новым функционалом - вступайте в наш чат https://join.skype.com/nMAYI9lpsJ9Z для JavaScript разработчиков
  • ограничения: работает на windows или linux-x64, только для Pro и Enterprise лицензий



Мы ежедневно работаем над улучшениями и предоставляем вам только качественный продукт!
Благодарим вас за использование A-Parser!

Сообщение отредактировал A-Parser Support - 1.12.2016, 10:54
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 12.12.2016, 10:12
Сообщение #97


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Всем привет!

Друзья, рады сообщить что мы обновили Каталог примеров и добавили 32 примера и 1 видео.

Более подробно вы можете всё просмотреть здесь: https://a-parser.com/threads/1738/


(IMG:https://a-parser.com/img/scr/V1qpV.png)

Всем профитной недели и приятной работы в месте с A-Parser!
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 16.12.2016, 13:20
Сообщение #98


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Дорогие друзья!

(IMG:https://a-parser.com/img/scr/e2s2f.png)

Рады сообщить о том, что мы впервые запустили новогодний розыгрыш 3 лицензий A-Parser'а. Две "Lite" и одну "Pro". Подробнее об условиях и дате вы можете узнать в нашей группе Вконтакте: https://vk.cc/5YBNVX

Не упустите этот момент, возможно розыгрыш произойдёт только один раз (IMG:http://4seo.biz/style_emoticons/default/smile.gif)

С любовью, команда A-Parser!
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 27.12.2016, 10:19
Сообщение #99


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



1.1.712 - новогодняя юбилейная 100-ая версия, JavaScript парсеры

(IMG:https://a-parser.com/img/scr/0atmu.png)

Всех с наступающим новым годом! Участвуйте в конкурсе и получайте бесплатные лицензии, но об этом ниже

Сегодня я хочу вам представить юбилейную 100-ую версию A-Parser'a! Да, мы выпустили ровно 100 версий за почти 5 лет существования нашего парсера. Разработка парсера никогда не останавливается, сейчас он буквально пухнет от возможностей! Это хорошо подчеркивает все принципы и подходы заложенные в A-Parser еще в далеком 2012 году.

Одно из главных новшеств новой версии - JavaScript парсеры, теперь каждый кто обладает хотя бы минимальными знаниями программирования сможет создавать высокопроизводительные парсеры на языке JavaScript используя все возможности A-Parser'а(многопоточность, работу с прокси, шаблонизатор, обработка запросов и результатов, и многое другое)

(IMG:https://a-parser.com/img/scr/65cdn.png)

A-Parser давно перестал быть просто парсером, на сегодняшний день это полнофункциональная платформа для сбора информации в промышленных масштабах, которая позволит вам собирать информацию из самых разных источников и множеством разных способов. В следующем году вас ждет еще больше новых возможностей, следите за новостями!

Улучшения
  • JavaScript парсеры - возможность создавать свои парсеры используя все преимущества A-Parser
  • JS парсеры: возможность получить и установить Cookies
  • JS парсеры: мютекс для синхронизации между потоками
  • JS парсеры: возможность использования инструментов tools
  • JS парсеры: поддержка запросов к другим парсерам
  • Множественные оптимизации всех парсеров, обработке подвергаются только те элементы страницы которые необходимы в результатах парсинга
  • В парсере (IMG:https://a-parser.com/img/parsers/html-textextractor.png) HTML::TextExtractor будут игнорироваться блоки меню без текста
  • В парсере (IMG:https://a-parser.com/img/parsers/se-google-compromised.png) SE::Google::Compromised добавлена возможность проверки подозрительных сайтов по всем страницам
  • API: добавлена возможность получить количество активных аккаунтов(для Яндекса)
  • API: при выставленном флаге rawResults будут передаваться все доступные результаты
  • Убрана настройка Raw data results, теперь необходимость этих результатов определяется автоматически
  • Добавлена возможность работы с одним прокси сервером(параметр Reuse proxy beetwen retries)
  • Если ошибка в шаблонизаторе произошла во время парсинга она будет записана в лог

Исправления в связи с изменениями в выдачи



Исправления
  • Исправлена ошибка с обработкой запросов вне рабочего каталога A-Parser, что в некоторых случаях могло привести к проблемам с безопасностью
  • В парсере (IMG:https://a-parser.com/img/parsers/se-yandex-wordstat.png) SE::Yandex::WordStat в редких ситуациях могла зациклиться работа с одним прокси
  • В парсере Net::HTTP не корректно работала опция Check next page при редиректе на другой URL
  • Исправлена проблема с работой Net::DNS на ОС Linux x64
  • Исправлен вывод ошибок в логе при уникализации "не доменов"
  • Исправлена работа парсера HTML::TextExtractor::LangDetect
  • Исправлен парсер Check::BackLink, ошибка появилась в предыдущей версии
  • Не выводились внешние переменные в методе .format, ошибка появилась в предыдущей версии



Напоминаем, что мы разыгрываем 3 лицензии на A-Parser общей стоимостью $437, участвуйте в конкурсе, победитель будет выбран 5ого января 2017!
Перейти в начало страницы
 
+Цитировать сообщение
A-Parser Support
сообщение 5.1.2017, 10:30
Сообщение #100


Ветеран
****

Группа: Кандидат
Сообщений: 121
Регистрация: 3.6.2013
Пользователь №: 971
Вставить ник
Цитата



Доброго времени суток друзья! Команда A-Parser поздравляет вас с наступившим 2017 годом и наступающим Рождеством.

Не забывайте о нашем розыгрыше https://vk.cc/5YBNVX/. Мы разыграем сегодня 3 лицензии на A-Parser общей стоимостью $437. Результаты розыгрыша после 17:00 по Москве. Более подробную информацию смотрите по ссылке которая указана выше.

(IMG:https://a-parser.com/img/scr/e2s2f.png)
Перейти в начало страницы
 
+Цитировать сообщение

7 страниц V  « < 3 4 5 6 7 >
Ответить в данную темуНачать новую тему
2 чел. читают эту тему (гостей: 2, скрытых пользователей: 0)
Пользователей: 0

 



RSS Текстовая версия Сейчас: 25.9.2018, 9:55