|
На страницу Пред. 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, ... 13, 14, 15, 16, 17, 18, 19, 20, 21, 22 След. |
|
|
| Пт Июн 01, 2012 9:21 pm |
Start Post: A-Parser - продвинутый парсер ПС, Suggest, WordStat, PR, etc  |
![]()
Forbidden
Свой |
Зарегистрирован: 18.02.2009
Сообщений: 66
|
Обратиться по нику
|
| Forbidden |
Ответить с цитатой | | |
|
Что такое A-Parser?
Это быстрый парсер с уклоном на универсальность, удобность и прозводительность.
На данный момент умеет парсить:
Поисковые системы
Каждый парсер может парсить ссылки, анкоры, сниппеты, количество страниц
Для гугла умеет обходить ограничение в 1000 результатов(скоро и для всех остальных парсеров так же будет), т.е. по одному запросу собирает всю выдачу
Парсеры кейвордов
Сервисы поиска ключевых слов
-
Yandex WordStat - собирает все кейворды и количество показов до указанной страницы. Так же собирает дополнительные кейворды, показы по главному кейворду и дату обновления статистики.
Подсказки поисковых систем
-
Подсказки и релейтед кеи Google
-
Подсказки и релейтед Bing
-
Подсказки, релейтед и трендовые кеи Yahoo
-
Подсказки и релейтед Yandex
Для подсказок гугла умеет автоматически собирать все кеи(подстановки до указанного уровня), для всех остальных парсеров такая возможность скоро так же появится
Параметры сайтов и доменов
-
Google PageRank - PR страниц и доменов
-
DMOZ - наличие сайта в каталоге DMOZ
-
Google TrustRank - проверка сайта на траст гугла(дополнительный блок ссылок в выдаче и т.п.)
-
Whois - дата экспайра домена
Планируется еще много парсеров в ближайшем будущем, все созданно для того чтобы быстро добавлять новые парсеры.
Не было бы никакого A-Parser'а если бы не он не имел все нижеперечисленные преимущества, оставляя остальные парсеры далеко в стороне:
- Полностью интерактивный мега-юзабильный веб интерфейс
- Быстрое добавление заданий - Quick Task, когда не нужны никакие настройки, а хочется только побыстрому спарсить результаты
- Расширенный редактор заданий, позволяет комбинировать несколько парсеров в одном задании, к примеру можно одновременно парсить ссылки со всех парсеров поисковых систем, делать уник по всем результатам прямо в процессе работы и т.д.
- Очередь заданий - статистика в реальном времени, выполнение одновременно нескольких заданий и т.д.
- Встроенные подсказки для элементов управления позволяют просматривать хелп непосредственно в интерфейсе
- Поддержка русского и английского языка
- Огромная скорость работы
- Поддержка двух самых популярных платформ - Linux и Windows, производительность под Windows фактически не отличается от Linux версии
- Открытая разработка, багтрекер, выслушивание всех мнений и их реализация
- Первоклассная тех поддержка, знакомая многим по моему старому проекту - A-Poster'у
- Данный список можно еще долго продолжать, в ближайшее время все уникальные возможности и подробное их описание появится в Wiki
Более подробное описание и скриншоты
Wiki - дополнительная информация, инструкции и т.д.
Скриншот интерфейса:
На данном скриншоте показан пример добавления задания на парсинг одновременно трёх поисковых систем - Google, Bing и Yahoo, одновременный уник по домену всех результатов
Ценовая политика
Цена лицензии - 200$, Абонентская плата - 15$ / 3 месяца, первые 3 месяца без абонентской платы.
Лицензия позволяет запускать A-Parser на одном сервере\компьютере. Переносить можно бесплатно, нельзя одновременно на нескольких запускать.
Чтобы купить - зарегистрируйтесь на a-parser.com и стучите в ICQ 777889
Предварительно перед покупкой с удовольствием отвечу на любые ваши вопросы, а так же возможно обсуждение реализации недостающего вам фукнционала. |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.180
Парсер Яндекса
SE::Yandex:
- Добавлена опция Parse not found, определяющая парсить ли выдачу если по искомому запросу найдено ноль результатов и предложена выдача по другому запросу
- Теперь яндекс гораздо реже показывает каптчу
- Исправлена отправка каптчи в связи с изменением в выдачи
- В некоторых случаях неверно отправлялся запрос на антигейт о неправильной каптчи
Парсер Яндекс Вордстата
SE::Yandex::WordStat:
- Улучшена работа с аккаунтами - неверно определялся заблокированный аккаунт
- Нельзя было использовать антигейт совместно с аккаунтами
Другие улучшения:
- Реализована статистика работы по каждому заданию, в текущей версии считает количество успешных запросов, использование проксей, попыток и HTTP-запросов
- Теперь при просмотре логов неудачные запросы выделяются красным цветом для удобства отладки
- Небольшие улучшения в скорости работы прокси
Исправления:
- Исправлен парсер
SE::AOL в связи с изменением в выдачи
- Исправлен парсер
Rank::Ahrefs в связи с изменением в выдачи
- Исправлен парсер
SE::Google::TrustCheck в связи с изменением в выдачи
- Исправлено разделение логов по запросам
Подробнее тут: Изменения в версии 1.0.180 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.183 - Русская каптча и эмуляция браузера в Яндексе
Теперь в настройках Антигейта(
Util::AntiGate) появилась возможность указать дополнительные настройки для каптчи: длину, регистрозависимость, состоит ли каптча только из цифр или её необходимо отправить русскоговорящему сотруднику, и т.п.
Яндекс ввел показ русской каптчи в выдачи, теперь парсер корректно обрабатывает её:
В дополнении к этому в парсере
SE::Yandex появилась опция эмуляции браузера, что позволяет добиться высокой скорости парсинга и малого расхода каптч. Парсинг топ-50 выдачи Яндекса в 500 потоков с использованием антигейта(средняя скорость ~2000 запросов в минуту):
Исправления:
- Исправлен парсинг сниппетов в парсере
SE::Google
Подробнее тут: Изменения в версии 1.0.183 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.198 - Улучшения в работе с Google, множественные исправления
Улучшения:
- Улучшения в работе с сессиями в парсере
SE::Google - уменьшено использование каптч
- Улучшения в работе с сессиями в парсере
SE::Yandex::WordStat::ByDate - уменьшено использование каптч
- Парсер
Net::HTTP теперь возвращает контент для обработки при любых ответах сервера(в т.ч. неудачных)
Исправления:
- В парсере
SE::Google не распознавалась каптча
- В парсере
SE::Yandex не сохранялись сессии
- HTTP прокси с авторизацией не работали в комбинации с некоторыми парсерами(например SE::Yandex)
- Макрос результата {firstquery} (первый запрос при использовании вложенного парсинга или парсинга с подстановками) не корректно работал с подстановками
- Исправлено определение количества результатов в выдаче в парсере
SE::Google
- Парсер
SE::Yandex::WordStat::ByDate не возвращал недельную разбивку, теперь выбор периода разбивки добавлен в настройки
- Парсер
SE::Google::Compromised в некоторых случаях работал некорректно
- Исправлен парсер
SE::AOL
- Исправлен парсер
Rank::OpenSiteExplorer
Подробнее тут: Версия 1.0.198 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.201 - обновлен парсер картинок Google, парсинг Bing News
Улучшения
- Полностью переписан парсер картинок
SE::Google::Images - теперь он парсит новую выдачу, до 10 страниц по 100 результатов
- Парсер
SE::Bing теперь поддерживает парсинг Bing News, также теперь можно выбрать время выдачи(за все время, за 24 часа, за неделю или за месяц)
- Парсер
HTML::LinkExtractor теперь автоматически считает внутренними ссылки с поддоменов www. и ftp., возможность учитывать все поддомены как внутренние оставлена без изменений
Исправления
- Исправлен парсер
SE::Bing::LangDetect в связи с изменением в выдачи
- Исправлен парсер
Rank::Ahrefs в связи с изменением в выдачи
- Парсер
SE::Google некорректно работал с каптчей при использовании регионального домена Google
- Парсер
SE::Yandex::WordStat зацикливался при работе с прокси, что приводило к остановке парсинга
Подробнее: Изменения в версии 1.0.201 |
|
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций |
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - 1.0.214 - новогоднее обновление, более 30 изменений!
Всех с наступающим Новым годом! Мы заготовили вам большой подарок, включающий более 30 изменений!
Интерфейс претерпел множество изменений:
- Переработано отображение задания в очереди, теперь оно более наглядное и информативное
- Настройки теперь сгруппированы по закладкам, что сильно упрощает навигацию
- Появилась возможность перемещать задание непосредственно в начало или в конец очереди
- Обновлен перевод всех элементов на русский язык
- В задании отображается прогресс в виде процента выполненных запросов
- Иконка теперь корректно отображается во всех браузерах
- Основное окно теперь можно позиционировать в верхний левый угол и масштабировать на всю рабочую область браузера
- Исправлена ошибка в импорте пресетов
Добавлены новые парсеры, общее число парсеров перевалило за 50:
-
Rank::Linkpad - парсер беклинков(линк, анкор, уровень вложенности) и статистики(число беклинков, доноров, iGood и т.д.) с сервиса linkpad.ru(бывший solomono)
-
SE::Bing::Images - парсер картинок с поисковика Bing(ссылка, размер, разрешение и сниппет)
-
SE::Yandex::WordStat::ByRegion - парсер статистики ключевых слов по регионам и городам в Вордстате
-
SE::Yandex::Webmaster::Index - быстрая оценка количества проиндексированных страниц в Яндексе
-
SE::Google::Trends - парсер кейвордов в тренде по версии Google, дополнительно парсит принадлежность кейвордов к группам
-
Rank::Alexa::API - быстрый чекер алексы через API
Улучшения:
- В парсер Яндекса
SE::Yandex добавлен парсинг ссылки на кэш страницы, также теперь парсер пробует использовать другую прокси если Яндекс принудительно перенаправляет на региональный домен(ua, kz, tr)
- Теперь можно производить уникализацию, фильтрацию и применять конструктор результатов ко всем результатам созданным пользователем с использованием фукнции Parse custom result(парсинг произвольного контента с помощью регулярных выражений)
- В настройках теперь возможно указать тип переноса строки используемый по умолчанию(Windows или Linux)
- Добавлена возможность сохранять неудачные запросы
- В статистику работы задания добавлен вывод забаненых проксей для каждого используемого парсера
- Файл с запросами теперь можно выбирать из подпапок
- В парсер частотности ключевых слов
SE::Yandex:: Direct::Frequency добавлен парсинг дополнительных ключевых слов(подсказок)
- В парсер Вордстата
SE::Yandex::WordStat добавлена возможность выбора сразу нескольких регионов для оценки
Исправления:
-
Rank::MajesticSEO в связи с изменением в выдаче
-
Rank::Ahrefs в связи с изменением в выдаче
-
SE::AOL в связи с изменением в выдаче
-
Net::Whois - некорректно определял незанятые домены в некоторых зонах
- Исправлено падение в некоторых случаях при использовании большого файла запросов совместно с уникализацией запросов
Подробнее: Изменения в версии 1.0.214 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.218
Улучшения
- Парсер
Net::Whois теперь поддерживает работу с интернациональными доменами(IDN, например яндекс.рф)
- Для парсера
SE::AOL добавлена опция No results is error - в некоторых случаях аол может вернуть пустую выдачу на вполне нормальный запрос, с этой опцией запросы с пустой выдачей будут перепаршиваться повторно
Исправления
- Парсер картинок
SE::Google::Images в связи с изменением в выдаче
- Парсер
SE::AOL в связи с изменением в выдаче
- При использовании API после некоторого числа запросов оно переставало отвечать
- Парсер
SE::Baidu в связи с изменением в выдаче
- Исправлена ошибка в обработке списка файлов запросов, что приводило к невозможности выбрать файл запроса из папки queries/
- Опция Try in Parser Test работала некорректно
- Исправлена ошибка в интерфейсе при составлении заданий с использованием опций Parse custom result/Results Builder, появившаяся в предыдущей версии
Подробнее: Изменения в версии 1.0.218 |
|
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций |
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.223
Новые парсеры:
-
SE::Yandex::Catalog - парсер сайтов по Яндекс.Каталогу, парсит ссылку, анкор, сниппет, категорию и гео-привязку. Также парсит количество результатов по запросу
-
Rank::Archive - парсит дату первого и последнего кэширования сайта в веб архиве(archive.org), также парсит количество сохраненных копий сайта. Данный парсер будет очень полезен для оценки доменов
Исправления:
- Парсер
SE::AOL в связи с изменением в выдачи
- Парсинг связанных кейвордов(related) в парсере
SE::Bing в связи с изменением в выдачи
- В некоторых случаях могли не передаваться дополнительные параметры к запросу(Extra query string)
Подробнее: Изменения в версии 1.0.223 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.232 - Новый шаблонизатор результатов, подстановка переменных и многое другое
Поздравляем всех защитников отечества с их профессиональным праздником!
В A-Parser включен шаблонизатор Template Toolkit - мощный инструмент для форматирования результатов, запросов, строк поиска и сравнения и т.д.; его основные особенности:
- Поддержка переменных, условий, циклов, макросов
- Множество встроенных функций для строк, массивов и хешей
- Неограниченные возможности по расширению
- Подробная документация на русском и английском языках
На данный момент по умолчанию действует старый шаблонный движок, тем самым позволяя использовать все ранее сохраненные настройки. Полный переход на новый движок будет плавный и будет включать следующие этапы:
- Развернутый пост о преимуществах с примерами на следующей неделе
- Обновление конфигурации A-Parser с новым синтаксисом формата вывода результатов
- Выпуск версии с поддержкой нового шаблонизатора по умолчанию
- Помощь со стороны технической поддержки в адаптации старых проектов
Новый синтаксис применяется если шаблон содержит комбинацию [% ... %], уже сейчас новый синтаксис можно использовать в:
- Шаблонах форматирования результатов(Result format)
- Шаблоне имени файла(Result file name)
- Фильтрах результатов для подстановки переменных данных(запросов, результатов) в условия сравнения
- Функции поиска по регулярному выражению(Parse custom result) в качестве части регулярного выражения
Другие улучшения:
- Добавлена функция сохранения исходного кода страниц, с которых осуществляется парсинг, что даёт возможность дополнительной обработки результатов(Raw data results)
- Подстановка запросов(или результатов) в условия для сравнения в фильтрах и как часть регулярного выражения для Parse custom result
- Дополнительный параметр к HTTP запросу(Extra query string) теперь подставляется только для главных запросов, от которых ожидаются результаты парсинга. Для вспомогательных запросов(работа с cookie, каптчей, авторизацией) этот параметр не подставляется
Исправления:
- Исправлена утечка памяти при обработке кодировки некоторых сайтов и сервисов
- Исправлен парсер
SE::Yandex - в связи с изменением в выдаче результаты из рекламных блоков считались результатами основной выдачи
- Парсер
Rank::CMS не работал при использовании функции логирования долгих регулярных выражений(Log long running regex)
Подробнее тут: Версия 1.0.232 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
Новый шаблонизатор в A-Parser
Зачем?
- Расширение возможностей - старый шаблонизатор был ограничен в возможностях, фактически он не умел ничего кроме вывода переменных и массивов
- Наглядный пример: используя шаблоны можно результаты парсинга автоматически преобразовать в дорвеи, готовые для загрузки на хостинг! Другой пример: готовый отчет по анализу доменов в виде HTML или CSV файла
- Лёгкий способ использовать переменные данные(запросы, результаты парсинга) на всех этапах работы парсера(формирование запроса; фильтрация, уникализация, форматирование, дополнительная обработка результатов)
- Исчерпывающая документация: Template Toolkit - проверенный времен шаблонный движок, который имеет большое сообщество пользователей
Массив? Переменная? Мне нужно программировать?
- Однозначно нет
 A-Parser рассчитан на широкую аудиторию и из коробки позволяет выполнять все основные задачи без каких либо дополнительных знаний
- Шаблоны призваны упростить решение сложных комплексных задач, например подсчет количества ссылок в топ10 выдачи Яндекса, в которых встречается исходный запрос в анкоре
- Шаблон - не язык программирования, он содержит около 5 основных макросов которые легко запомнить и использовать
Читать далее |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - версия 1.0.236 - промежуточный релиз, исправление текущих ошибок
Улучшения:
- Теперь можно перемещать задания в очереди используя API - добавлен метод moveTask
- Многократно увеличена скорость при обработке регулярных выражений в Parse custom result
Исправления:
- Исправлена ошибка в
SE::Yandex приводящая к падению парсера, ошибка появилась в предыдущей версии
- Исправлен парсер
SE::YouTube в связи с изменением в выдаче
- Парсер мог упасть при использовании неправильного регулярного выражения, ошибка появилась в предыдущей версии
- Исправлен регистратор аккаунтов в Яндексе
SE::Yandex::Register в связи с изменением в выдаче
- Исправлен парсер
SE::Yahoo в связи с изменением в выдаче
Подробнее тут: Версия 1.0.236 |
|
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций |
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
A-Parser - 1.0.268 - Бета версия, полный переход на новый шаблонизатор, множество улучшений
Основные улучшения:
- Переход на систему быстрых обновлений, теперь получить обновление на канале бета-версии можно за пару минут
- Полный переход на новый шаблонизатор, старый синтаксис более недоступен
- Все настройки в автоматическом режиме преобразуются под новый синтаксис при первом старте парсера
- Создан инструмент для тестирования шаблонов, в нем можно проверить форматирование до парсинга
- В настройках можно указать часто используемые макросы и функции, которые будут доступны в любом месте где используется шаблонизатор
- Шаблоны также работают в полях Prepend и Append - автоматическое добавление заголовка и окончания для файлов результатов
- Теперь шаблон можно задавать в удобном многострочном редакторе
- Увеличена скорость работы конструктора запросов и результатов
- В парсере
SE::Yandex::Suggest теперь можно выбрать произвольный регион, в т.ч. на основе IP адреса
Исправления в связи с изменениями в выдачи:
- Исправлена опция эмуляции браузера для парсера
SE::Yandex
- Исправлен парсинг выдачи
SE::Yandex при запросах вида url:, а так же исправлен парсинг рекламных блоков
- Исправлен парсер тИЦ
SE::Yandex::TIC
- Исправлен парсер
Rank::Ahrefs - выдавал неверные данные
- Исправлен парсинг общего числа результатов в
SE::Baidu
- Исправлен парсер
Rank:: DMOZ
- Исправлен парсер картинок
SE::Google::Images
- Исправлен парсинг описаний к видео в
SE::YouTube
Информация
- Для обновления необходимо зайти в Members Area, раздел Downloads, в секции A-Parser Beta запросить обновление кликнув по Update
- Все вопросы по новому синтаксису шаблонов можно задавать в этом топике
- Для желающих тестировать самые последние версии создан отдельный скайп-чат, подробнее тут
Список всех изменений в версии 1.0.268 |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
Новая документация и текущий статус Бета-версии
В скором времени увидит свет A-Parser версии 1.1.0 - результат двух-месячной разработки Бета-версии. На текущий момент Бета-версия абсолютно стабильна и рекомендуется к использованию как новым пользователям, так и всем кто уже имеет лицензию
Ключевой особенностью новой версии парсера является наличие новой документации, в которой мы постарались осветить все возможности и особенности работы A-Parser'а. В документации подробно описаны такие возможности как:
Обсудить новую документацию можно на форуме
Помимо этого текущая бета версия содержит множество исправлений и улучшений, следите за новостями о релизе! |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
Новая версия Lite, автоматическая оплата прокси
- Добавлена новая лицензия Lite, включающая только парсеры Google и Яндекса
- Добавлена автоматическая оплата через WebMoney, Yandex.Money, Visa, MasterCard, Paxum, LiqPay, PerfectMoney, W1, Банки, СМС, Терминалы оплаты
- Оплачивать можно лицензии на A-Parser, A-Poster, прокси, обновления A-Parser и дополнительные лицензии A-Parser
- Новая сетка цен
- Последние изменения в бета версии
- Переработано описание парсера
Мы ждем ваших вопросов наши контакты |
|
|
|
|
|
|
![]()
reeemmmy
Свой |
Зарегистрирован: 08.08.2009
Сообщений: 64
|
Обратиться по нику
|
| reeemmmy |
Ответить с цитатой | | |
|
Хочу поделиться своим опытом использования A-Parser и сравнить с другими продуктами, которыми приходилось пользоваться.
Чем я пользовался раньше для парсинга
В своей работе у меня есть опыт использования как самописных парсеров на php так и content downloader, а теперь еще и A-parser
С приобретением cd мне уже не нужны стали скрипты на php, там очень удобный визуальный редактор задания границ парсинга - это очень удобно чтобы не морочиться с регулярками + визуальный интерфейс, если ты не программер и не хочешь ковыряться в коде, то очень удобно.
Так зачем все-таки я приобрел a-parser?
CD хорошо подойдет для ювелирной работы когда надо быстро спарсить небольшой сайт, но если речь идет о сборе, например, поисковой выдачи по миллионам запросов, то нужно что то помощнее!
Как раз для парсинга небольших сайтов по прежнему пользуюсь CD т.к. для каждой задачи свой инструмент.
A-parser - идеальное решение для тех кому нужен надежный комбайн справляющийся с большими заданиями (как танк работает четко прет напролом ), мне он очень помог когда у меня выросли потребности и объёмы
Плюсы
- мощный инструмент, может большие объёмы собирать
- есть под win и linux серверный (можно ставить и под винду дома или хостить на сервере)
- готовые парсеры под основные задачи (выдача поисковиков, запросы и тд список большой и обновляется)
- отличная документация (чего нет у конкурентов!)
- разработчик заботится о клиентах и оказывает хорошую поддержку, мне помогал с примерами решить мою задачу
- постоянные обновления софта
- работает с большими файлами
Минусы
- сложновато было сразу сходу начать пользоваться, пришлось покурить мануал 
- сложновато по началу создание своих кастомных парсеров, но при углублении в мануал и общении с сапортом все решается
Возможно минусы есть еще, но мои задачи я 2 недели уже решаю полностью.
Итого: отлично подойдет для тех у кого большие объёмы.
P.S. о покупке не пожалел, рекомендую  |
|
|
|
|
|
|
![]()
A-Parser Support +
Опытный |
Зарегистрирован: 02.06.2013
Сообщений: 282
|
Обратиться по нику
|
| A-Parser Support + |
Ответить с цитатой | | |
|
Релиз A-Parser 1.1.0, автоматический прием PayPal, Wire, QIWI
Релиз A-Parser 1.1.0 - результат активной разработки в течении двух месяцев в рамках бета-версии
Улучшения
- Новый парсер
HTML::TextExtractor::LangDetect - улучшенное определение языка страницы, без использования сторонних сервисов
- Для парсера
SE::Google добавлена возможность указывать локацию поиска - город или регион
- Новый инструмент - обновление A-Parser, теперь обновления можно устанавливать автоматически через интерфейс, поддерживается два канала обновлений - Stable и Beta
- Для уникализации результатов теперь используется LevelDB - лучшая скорость и низкое потребление памяти
- Улучшена работа с битыми кодировками и детектирование кодировки страницы
- В инструменте тестирования шаблонов теперь доступны предустановленные результаты для всех парсеров
- Шаблонизатор теперь можно использовать в самих запросах, в формате запроса, а также в Конструкторе результатов
- Для парсера
Net::HTTP при формировании POST запроса добавлена возможность использовать шаблонизатор в теле запроса
- Добавлена возможность выводить результаты в формате JSON
- Новая опция Not found is error для парсера
Net:: DNS - позволяет перепроверять ложные ответы от DNS серверов
- Добавлена возможность удалять неиспользуемые базы данных Keep unique
- Новые подсказки в интерфейсе, соответствуют новому формату шаблонов
- Добавлена возможность сбросить пароль доступа к интерфейсу A-Parser
- Сервер парсера теперь можно выключить или перезапустить через веб-интерфейс
Исправления
- Исправлен парсер
SE::Yandex в связи с переходом на новую выдачу
- Исправлен парсер
SE::AOL в связи с изменением в выдачи
- Исправлен ошибка, при которой проверка прокси начиналась заново при перезагрузке интерфейса
- Исправлена медленная работа очереди заданий при большом количестве заданий(более 1000)
- Исправлен вывод исходного запроса $query.first при многоуровневом парсинге в
SE::Yandex::WordStat
-
Net:: DNS - исправлена работа на ОС Windows
-
SE::Yandex::Webmaster::Index удален в связи с прекращением работы сервиса
- Исправлено некорректное определение некоторых полей в парсере
Net::Whois
- Исправлена работа переменной $pagenum в парсере
Net::HTTP
- Исправлена ошибка, при которой парсер мог вылететь при использовании уникализации по простым результам
- Задания с пустым файлом запросов не завершались автоматически
- Исправлен парсер
Rank::Ahrefs в связи с изменением в выдачи
- Исправлен парсер
Rank::Alexa в связи с изменением в выдачи
- Исправлен парсер
Rank::MajesticSEO в связи с изменением в выдачи
- Исправлена работа с кодировкой windows-1251
- Исправлен подсчет числа простых результатов
- Исправлена работа метода CONNECT при использовании прокси с авторизацией по логин\паролю
- Исправлен парсер
Rank::Category в связи с изменением в выдачи
Полный список всех изменений в соответствующем разделе
Также мы рады сообщить что добавили прием PayPal, QIWI и Wire Transfer в автоматическом режиме |
|
|
|
|
|
|
| Новая тема |
Написать ответ |
ГЛАВНАЯ
~ РЕКЛАМА И ОБЪЯВЛЕНИЯ | На страницу Пред. 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, ... 13, 14, 15, 16, 17, 18, 19, 20, 21, 22 След. |
|
|
Партнеры
|
