С нами с 05.11.10
Сообщения: 266
Рейтинг: 439
|
 Добавлено: 05/01/17 в 18:16 |
|
|
|
|
| |
+ + +
С нами с 04.11.10
Сообщения: 4874
Рейтинг: 172
|
| Добавлено: 05/01/17 в 22:33 |
| Certified Accountant писал: | 403 Forbidden
Apache |
Розыгрыш уже был.
Ну а вообще ссылку конечно кривую дали. Там без слэша на конце должно быть.
Вот правильная ссылка.
|
|
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 16/01/17 в 12:27 |
[URL="https://a-parser.com/threads/2964/"]1.1.726 - новые возможности планировщика, множество исправлений[/URL]
Улучшения
- В планировщик добавлена возможность ежемесячного запуска заданий, с возможностью выбрать определенный день месяца
- В планировщике теперь можно указать уникальность задания, если задание активно в очереди то при попытке его запуска через планировщик оно будет отложено до следующего запуска
- Файл логов задания теперь удаляется одновременно с удалением задания
- В тестовом парсинге улучшен дебагер и предпросмотр HTML кода
Исправления в связи с изменениями в выдачи
 SE::YouTube,  Rank::DMOZ,  Rank::Mustat,  SE::Dogpile,  SE::Ask,  SE::AOL
Исправления
- В парсере
 Net::Whois исправлен парсинг дат для множества доменных зон
- Функция добавления ! перед каждым словом(для снятия частотности по WordStat) в некоторых случаях работала некорректно
- Исправлена ошибка при работе прокси с использованием только одной попытки(Request retries)
- Исправлена ошибка при которой парсер падал при неверно составленном Конструкторе результатов
- В некоторых случаях использование XPath могло приводить к зависанию парсера
- В парсере
 SEO::Ping исправлена обработка ответов для некоторых сервисов
- В некоторых случаях ошибка задания могла отображаться некорректно
Так же, мы хотели бы ещё раз поздравить наших победителей которые получили лицензии A-Parser'a: Сергея Чернова, Романа Лисина и Илью Нечаева. Поздравляем вас ещё раз!
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 01/02/17 в 13:16 |
В этом видео вы узнаете как собрать тысячи и миллионы профилей в социальной сети ВКонтакте:
В уроке рассмотрены:
- Создание парсера профилей соцсети ВКонтакте: имя, город, телефон, семейной положение, время последнего захода и ссылку на аватар(фотографию)
- Использование регулярных выражений для фильтрации данных результата
- Использование конструктора результатов для модификации результатов
- Использование Cookies в запросах
Подписывайтесь на наш канал, ставьте лайки и оставляйте в комментариях пожелания для следующих уроков!
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 08/02/17 в 11:44 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 27/02/17 в 12:09 |
1.1.764 - шаблонизатор в полях конфига, выбор языка в SE::Bing
Улучшения
- В парсер
 SE::Bing добавлена возможность выбора языка результатов поиска
- Во всех полях конфигурации каждого парсера теперь есть возможность использовать шаблонизатор, тем самым позволяя использовать запрос или его часть как значение конфига, а также добавлять произвольную логику(пример - использование переменного DNS сервера)
- В JavaScript парсерах добавлена возможность установки одиночного cookie(this.cookies.set)
- В парсере
 SE::Yandex::WordStat SE::Yandex::WordStat уменьшено потребление каптчи
Исправления в связи с изменениями в выдачи
-
 SE::Google - исправлена работа с антигейтом
- В парсере SE::Google исправлен парсинг объявлений, а также пропуск первого результата поиска в редких случаях
- В парсере
 SE::Yandex исправлен сбор сниппетов
- SE::AOL,
 SE::Bing::Images
Исправления
- Исправлена утечка памяти при использовании логов в задании
- В парсере SE::Ask не определялся бан прокси
- Исправлена работа опции allow_outside_files
- Исправлена работа с utf8 в исходниках tools.js и JavaScript парсерах
- В редких случаях при неудачном парсинге 2ой или последующих страниц запрос мог считаться успешным
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 27/03/17 в 10:48 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 06/04/17 в 12:41 |
1.1.811 - 6 новых парсеров, улучшения в JavaScript парсерах
В A-Parser 1.1.811 добавлено 6 новых встроенных парсеров - Амазон, Яндекс.Маркет, Рамблер, IxQuick, добавление ссылки в индекс Bing, расширенный парсер Moz(OpenSiteExplorer). Добавляйте идеи для новых парсеров на нашем форуме и мы их обязательно реализуем.
Помимо встроенных парсеров вы можете создавать свои собственные парсеры на языке JavaScript - используя всю мощь многопоточности A-Parser'а, а также производительность движка V8 и преимущества ES6.
Для владельцев CapMonster и XEvil - напоминаем что A-Parser можно подключить к этим программам из коробки, тем самым колоссально повысив скорость парсинга во многих парсерах
Улучшения
- Новый парсер
 Shop::Amazon - парсит выдачу https://www.amazon.com по ключевому слову, собирает название, ссылку, картинку, прайс, прайс до скидки, рейтинг, число комментариев, продавца и дополнительную информацию
- Новый парсер
 Shop::Yandex::Market - парсер Яндекс.Маркета, по указанному ключевому слову(или по прямой ссылке на категорию) собирает следующие данные: название товара, ссылку, ссылку на картинку, рейтинг, число комментариев, цену от и до, число предложений от магазинов и список дополнительных характеристик
- Новый парсер
 SE::Rambler - сегодня рамблер использует одновременно выдачу Google и Яндекса, в зависимости от геолокации пользователя(прокси), есть поддержка антигейта
- Новый парсер
 SE::IxQuick - https://www.ixquick.com - еще один поисковик, основанный на выдаче Google
- Добавление ссылок в индекс Бинга -
 SE::Bing::AddURL - добавляет ваши ссылки в промышленных масштабах, требуется антигейт
- Новый парсер
 Rank::OpenSiteExplorer::Extended - расширенная версия парсера  Rank::OpenSiteExplorer, собирает с https://moz.com 39 параметров по домену, сабдомену и странице
- JavaScript парсеры: новые методы this.util.urlFromHTML(url, [base]) и this.util.updateResultsData(results, data)
- В парсере SE::Yandex добавлен сбор времени последнего кэширования страницы
Исправления в связи с изменениями в выдаче
- SE::Yandex - исправлен парсинг выдачи, сбор ссылки на кэш страницы, а также парсинг рекламных объявлений
- SE::Google - исправлен парсинг рекламных объявлений, а также проблема с парсингом в редких случаях при использовании антигейта
- В парсере Net::Whois исправлен парсинг дат, а также улучшен парсинг whois сервера GoDaddy
-
 SE::Google::Trends - полностью обновлен парсер и список собираемых значений
-
 Rank::LinkPad,  Rank::MajesticSEO,  SE::Seznam
Исправления
- Проблема с прокруткой в Планировщике
- Проблема с кодировкой в tools.parseJSON
- Ошибка импорта JavaScript парсеров
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 20/04/17 в 14:48 |
1.1.832 - новые парсеры, выбор языка интерфейса в Google
Улучшения
- Новый парсер
 Rank::SimilarWeb - парсит сервис http://similarweb.com, собирает множество параметров, включая ранк домена, трафик, распределение трафика по источникам и странам
- Новый парсер
 Rank::MegaIndex - парсит сервис https://megaindex.com, собирает число трафика по органике и рекламным запросам, а также различную информацию о беклинках и индексации сайта
- Новый парсер
 Rank::SEMrush::Keyword - собирает трафик, конкуренцию и другие параметры по ключевому слову в сервисе http://semrush.com
- В парсере SE::Google добавлена возможность выбора языка интерфейса гугла, актуально для точного снятия позиций
- В настройках антигейта добавлена опция Report bad captchas - отключив которую можно сэкономить время на запрос о неправильной каптче, актуально для CapMonster и XEvil
- Удалены 5 устаревших парсеров:
 SE::Google::pR - сервис больше не существует,  SE::Google::Maps - выдача зависит от гео прокси,  Rank::Ahrefs - парсинг сервиса возможен только с аккаунтами с подтвержденной кредитной картой,  Rank::Category - нет подходящего сервиса, Rank::DMOZ - dmoz прекратил свое существование в марте
- Теперь парсер SE::Yandex по умолчанию использует https, избегая ненужного редиректа
Исправления в связи с изменениями в выдаче
- SE::Bing,
 Rank::Archive, SE::AOL, SE::IxQuick,  SE::Yahoo, Rank::Linkpad
Исправления
- JavaScript парсеры: исправлена обработка checkbox в настройках
- JavaScript парсеры: исправлено падение при одновременном запуске нескольких заданий
- SE::Bing::AddURL - исправлена работа при неверно разгаданной каптче
- SE::Google::Trends - исправлена работа с неанглийскими запросами
- В парсере
 Net::HTTP исправлена работа опции Check next page в редких случаях
- Исправлена работа со сжатым контентом для редких сайтов
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 15/05/17 в 13:23 |
1.1.873 - парсинг Google со скоростью 10000+ запросов в минуту
В версии A-Parser 1.1.873 добавлен новый парсер  SE::Google::Fast позволяющий парсить Google со скоростью 10к+ запросов в минуту без использования антикаптчи
Улучшения
- Новый парсер SE::Google::Fast - быстрый парсер выдачи гугла, способен развить скорость более 10000 запросов в минуту без использования антикаптчи
- Новый парсер
 SE::Google::ByImage - парсер картинок из Google по ссылке на картинку
- В парсере Rank::SimilarWeb добавлена поддержка антикаптчи
- В парсере Rank::Linkpad добавлены новые параметры для сбора - ранк домена, процент nofollow и безанкорных ссылок, число доноров по IP и подсетям, а также стоимость размещения ссылок
- JavaScript парсеры: добавлен параметр browser для this.request, позволяющий автоматически эмулировать заголовки браузера
- В инструменты tools добавлена возможность кодировать и декодировать base64
- Теперь в tools.data содержится большое количество предустановленной информации - языки, регионы, домены для поисковых систем Google и Яндекс
Исправления в связи с изменениями в выдаче
- Rank::SimilarWeb,
 SE::Google::Images, Rank::MajesticSEO
Исправления
- Исправлена уязвимость позволяющая читать файлы на сервере при известном пароле
- Исправлена ошибка в тестировщике заданий - могли обрабатываться не все запросы
- При использовании tools.query.add задание могло зависнуть в очереди, ошибка появилась в предыдущем релизе
- Исправлена работа tools.js на ОС Linux
- Исправлена утечка памяти при использовании JavaScript парсеров
- Исправлена работа опции Динамический лимит потоков
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 05/06/17 в 12:22 |
Новый каталог парсеров и пресетов
Представляем наш новый каталог парсеров и пресетов - это бесплатные дополнения и примеры для всех пользователей A-Parser Pro и A-Parser Enterprise. Каталог полностью интегрирован с парсером, установка из каталога происходит в один клик
Подавляющее большинство примеров были перенесены из старого каталога, часть из них была обновлена. Небольшое кол-во примеров переехали в наш FAQ, т.к. их формат не совсем вписывался в новый каталог. Более того, теперь в каталоге доступны все наши обучающие видео и статьи. Также добавлены примеры JavaScript-парсеров. Каталог разбит на категории, что облегчает поиск нужного примера
На данный момент в каталоге 100 парсеров и пресетов, 9 видео и 2 обзорных статьи, вот некоторые из них:
Любой пользователь может добавить в каталог свой пресет, за что ему будет большая благодарность  Присылайте свои идеи для новых парсеров, самые интересные и востребованные мы обязательно реализуем!
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 26/06/17 в 16:15 |
Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК
17-й сборник рецептов. В нем мы будем парсить картинки из популярного фотохостинга Flickr; научимся писать JavaScript парсеры и определять язык ключевых слов; разберемся, как получать список пользователей, которые лайкнули пост во Вконтакте. Поехали!
Парсер изображений с Flickr
Flickr - это один из наиболее популярных фотохостингов. Согласно Википедии еще в 2011 году кол-во фото на нем превысило отметку в 6 млрд и продолжает активно расти. Именно поэтому поиск фото на данном хостинге - это актуальная задача, и она легко решается с помощью A-Parser. Подробности по ссылке выше.
JS::Yandex::LangDetect::Key - определение языка ключевого слова через Яндекс Переводчик
Как известно, в юбилейном 100-м релизе А-Парсера появился давно ожидаемый функционал: JavaScript парсеры. Благодаря этому возможности парсера значительно выросли, а также теперь можно выполнять задачи еще быстрее и эффективнее.
Бывает, что нужно получить ключевые слова только на каком-то определенном языке, и возникает задача определения этого самого языка для каждого ключа. С этим неплохо справляются различные переводчики. К примеру Яндек.Переводчик. В этом примере будет показано создание JS-парсера для решения данной задачи, подробности, как обычно, по ссылке выше.
Получение списка пользователей, которые лайкнули пост в VK
Вконтакте - это одна из самых популярных социальных сетей на територии СНГ. Поэтому парсинг различных данных из нее - это очень востребованные задачи. В нашем каталоге можно найти несколько таких пресетов, а в данном примере будет показан парсинг списка пользователей, которые лайкнули определенный пост. Это может быть полезно, например, при проведении различных акций, когда требуется получить такой список пользователей. Детали по ссылке выше.
Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге!
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте
- Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов
- Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов
- Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы
- Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта
- Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво
- Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам
- Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube
- Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность
- Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий
- Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции!
- Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок
- Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query
- Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты
- Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu
- Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 11/07/17 в 10:30 |
[URL="https://a-parser.com/threads/3596/"]1.1.888 - парсер РосКомНадзора и переводчики Google и Яндекса[/URL]
Улучшения
- Новый парсер
 Check::RosKomNadzor - проверяет наличие домена или ссылки в реестре запрещенных сайтов, для работы необходим антигейт
- Новый парсер
 SE::Google::Translate - переводчик текста через сервис Google Translate
- Новый парсер
 SE::Yandex::Translate - переводчик текста через Яндекс.Переводчик
Исправления в связи с изменениями в выдачи
- Парсер
 SE::DisconnectMe удален в связи с постоянным редиректом на DuckDuckGo, используйте  SE::DuckDuckGo
- SE::Google::Images, SE::Google,
 SE::Yandex::Images
Исправления
- В парсере Net::Whois исправлена работа с доменной зоной .fr
- SE::Google - не собирались Related keywords на языках интерфейса отличного от английского
- Исправлен обход защиты CloudFlare на ОС Linux
- Исправлено падение при запуске задания с удаленным конфигом потоков
- Не корректно работало переопределение tools.js в задании, ошибка появилась в предыдущей версии
- В парсере SE::Google::ByImage не выводился Raw data
- В парсер Rank::SimilarWeb не корректно определялся totalvisits
- Не работало изменение названия пресета при импорте
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 21/07/17 в 13:32 |
Больше, лучше, быстрее - расширение команды поддержки
Всем привет, мы расширили команду поддержки пользователей!
Встречайте наших героев:
- Ярослав - руководитель службы поддержки
- Денис и Юра - наши новые специалисты
Также мы увеличили количество каналов для ваших вопросов:
- Тикет система, онлайн чат и форум поддержки
- Все популярные мессенджеры: Skype, Telegram, ICQ, Jabber
И самое главное: мы обновили документацию и продолжаем наполнять наш каталог парсеров и пресетов - уже более 140 готовых примеров! Предлагайте свои идеи и мы обязательно их реализуем!
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 31/07/17 в 17:19 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 09/08/17 в 11:58 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 23/08/17 в 13:03 |
1.1.918 - улучшена работа с override и отдельные append/preppend text для каждого файла
Улучшения:
- Изменена работа с override: устранена возможность их дублирования, а также улучшен выбор и добавление настроек в пресет в один клик
- Добавлена возможность для каждого файла результатов задавать индивидуальные Начальный/Конечный текст
Исправления в связи с изменениями в выдаче:
- SE::Dogpile, Rank::MajesticSEO, SE::Google::Images, SE::Yandex
Исправления:
- Исправлены падения при работе JS парсеров на Windows 10
- Исправлен баг с "белым экраном", который появился в предыдущей версии
- Парсер Rank::SimilarWeb удален в связи с требованием правообладателей
- Исправлен баг, при котором не срабатывал шаблон в Общем формате результата при пустом имени файла результата, появился в версии 1.1.896
- Исправлена работа с каптчей в SE::Google при работе через IPv6 прокси
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 05/09/17 в 14:28 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 18/09/17 в 15:34 |
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 28/09/17 в 13:31 |
Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов
18-й сборник рецептов. В нем мы будем смотреть как выглядят сайты сразу в нескольких браузерах, протестируем облегченную выдачу Яндекса и проверим сайты в Яндексы. Кроме этого в сборнике предоставлены парсер для проверки существования e-mailов и пресет для получения позиций сразу по нескольким регионам. Итак, поехали!
Автоматизация тестирования сайтов в разных браузерах
Наверное каждый разработчик сайтов сталкивается с вопросом тестирования своих наработок в различных браузерах. Можно конечно держать для этого несколько виртуальных машин, что далеко не совсем рационально. Можно собирать отзывы от пользователей, что негативно влияет на общее впечатление от сайта тех же пользователей. А можно воспользоваться специализированными сервисами. Например BrowserStack. А с помощью А-Парсера этот процесс можно еще и автоматизировать, если к примеру нужно сразу протестировать множество сайтов. Как это сделать - читайте по ссылке выше.
Парсинг lite выдачи Яндекса
Недавно на Хабре была опубликована статья о lite выдаче поиска Яндекса. Нам стало интересно, насколько такая выдача может быть полезной в сравнении с обычной с точки зрения парсинга. Мы с помощью функционала JS парсеров сделали новый парсер и сравнили его со стандартным. Как это было, что из этого вышло и какие получились выводы, а также готовый парсер lite выдачи Яндекса - по ссылке выше.
Проверка сайта в Яндекс
Поисковую выдачу Яндекса можно использовать для решения самых разных задач. Одна из них - проверка сайтов на различные типы угроз. Яндекс отмечает такие сайты в выдаче специальными метками. С помощью A-Parser можно быстро проверить большие списки сайтов на наличие таких меток. Как это сделать - описано по ссылке выше.
Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Предыдущие сборники
- Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте
- Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов
- Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов
- Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы
- Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта
- Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво
- Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам
- Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube
- Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность
- Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий
- Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции!
- Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок
- Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query
- Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты
- Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu
- Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей
- Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 11/10/17 в 13:57 |
Прием оплаты криптовалютами (Bitcoin и т.п.)
После отключения приема Интеркассой биткоинов, мы добавили собственную возможность оплаты в личном кабинете различными криптовалютами. Поддерживаются Bitcoin, BCH, LTC, ETH и другие альткоины.
Для того чтобы сделать оплату, достаточно выбрать в личном кабинете соответствующий способ:
И проследовать дальнейшим инструкциям, выбрав нужную криптовалюту.
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 19/10/17 в 16:17 |
Сборник рецептов #19: публикация сообщений в Wordpress, парсинг Chrome Webstore и AliExpress
19-й сборник рецептов. В нем мы будем постить сообщения в блоги Wordpress, парсить Chrome Webstore и AliExpress. Поехали!
Постинг сообщений в Wordpress блоги
Как известно, А-Парсер - это многофункциональный парсер. И он настолько многофункционален, что может не только парсить, но и постить! О том, как это сделать, пойдет речь в этой статье. В качестве примера выбран один из самых популярных движков - Wordpress. Все подробности, а также готовый постер - по ссылке выше.
Получение ссылок на плагины из Chrome Webstore
Браузер Chrome является одним из самых популярных в мире. И в нем практически с самого начала существования есть поддержка расширений, которые доступны в специальном магазине. Данный магазин представляет собой обычный сайт, который, как и любые другие, можно парсить. Полученная информация может быть использована к примеру для создания собственного магазина расширений или парсинга текстовок. Детальнее о том, как создавать такие парсеры - в статье по ссылке выше.
Парсер AliExpress
AliExpress - это одна из крупнейших торговых онлайн площадок. Парсинг данных о товарах из алиэкспресс позволяет проводить сравнение цен, получать картинки и названия товаров. Готовый парсер JS::Shop::AliExpress доступен в нашем каталоге по ссылке выше.
Кроме этого:
Еще больше различных рецептов в нашем обновленном Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
- Сборник рецептов #1: Определяем CMS, оцениваем частотность ключевых слов и парсим Вконтакте
- Сборник рецептов #2: собираем форумы для XRumer, парсим email со страниц контактов
- Сборник рецептов #3: мобильные сайты, несколько парсеров, позиции ключевых слов
- Сборник рецептов #4: поиск в выдаче, парсинг интернет-магазина и скачиваем файлы
- Сборник рецептов #5: ссылки из JS, паблик прокси и карта сайта
- Сборник рецептов #6: парсим базу номеров телефонов и сохраняем результаты красиво
- Сборник рецептов #7: парсим RSS, качаем картинки и фильтруем результат по заголовкам
- Сборник рецептов #8: парсим 2GIS, Google translate и подсказки Youtube
- Сборник рецептов #9: проверяем сезонность ключевых слов и их полезность
- Сборник рецептов #10: пишем кастомный парсер поисковика и парсим дерево категорий
- Сборник рецептов #11: парсим Авито, работаем с JavaScript, анализируем тексты и участвуем в акции!
- Сборник рецептов #12: парсим Instagram, собираем статистику и делаем свои парсеры подсказок
- Сборник рецептов #13: сохраняем результат в файл дампа SQL и знакомимся с $tools.query
- Сборник рецептов #14: используем XPath, анализируем сайты и создаем комбинированные пресеты
- Сборник рецептов #15: анализируем скорость и юзабилити сайтов, парсим Яндекс.Картинки и Baidu
- Сборник рецептов #16: парсинг OpenSiteExplorer с авторизацией, Яндекс.Каталога и Яндекс.Новостей
- Сборник рецептов #17: картинки из Flickr, язык ключевых слов, список лайков в ВК
- Сборник рецептов #18: скриншоты сайтов, lite выдача Яндекса и проверка сайтов
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 09/11/17 в 12:00 |
1.2.0 - обновленный интерфейс и множество улучшений
Мы рады представить релиз A-Parser 1.2.0 - результат почти двухмесячной разработки на бета-канале!
Полностью обновленный интерфейс, переработан ряд парсеров, реализовано множество различных улучшений.
Новые парсеры
- SE::Google::Modern - теперь старая, новая и мобильная выдачи в одном парсере, а также поддержка работы с каптчами и рекаптчами
 Util::ReCaptcha2 - распознавание Google ReCaptcha2 через популярные сервисы (anti-captcha, rucaptcha, CapMonster, а в скором будущем и xevil)
Улучшения
- Полностью обновлен интерфейс
- Добавлен статусбар, в котором выводится
- статус парсера
- количество работающих и всего заданий
- количество живых и загруженных прокси
- количество задействованных потоков
- Полностью изменен выбор файлов запросов. Теперь легко можно выбирать несколько файлов, а также папки целиком
- Реализована возможность получать JSON для API прямо в Редакторе заданий
- Добавлен поиск во всех списках
- Добавлена возможность сворачивания меню для увеличения рабочей области
- В Тестовом парсинге добавлена новая область быстрых настроек: отключение автоскрола и включение debug режима
- Добавлено предупреждение о риске затереть конфиг при обновлении через интерфейс
- Добавлена возможность включения форматирования больших чисел
- JS парсеры: добавлена опция use_proxy для this.request, которая позволяет переопределить использование прокси для отдельного запроса внутри JS парсера поверх глобального параметра Use proxy
- JS парсеры: this.util переименован в this.utils и добавлены новые функции
- JS парсеры: добавлена группировка в списке парсеров
- Изменена иконка приложения, а также иконки некоторых парсеров
Исправления
- Исправлена ситуация, когда оставались форматы запросов с предыдущего открытого задания
- Исправлен перевод запросов с кавычками в SE::Yandex::Translate
- Исправлен баг с сохранением переменных уникализации в некоторых случаях
- Исправлена ошибка в SE::Google при работе со старой каптчей
- Исправлена ошибка при открытии лога (возникла в одной из предыдущих версий)
- Исправлена ошибка при удалении заданий (возникла в одной из предыдущих версий)
Исправления в связи с изменениями в выдачи
- В SE::Google исправлена проблема с использованием всех попыток при получении каптчи
- Shop::Amazon, SE::Ask, SE::Yandex,
 SE::Comcast,  SE::Google::SafeBrowsing, SE::Google::ByImage, Shop::Yandex::Market, SE::Bing::Images, SE::AOL, SE::IxQuick, Rank::Semrush::Keyword, Rank::MajesticSEO
Впереди у нас еще очень много планов, поэтому оставайтесь с нами и следите за новостями!
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
1
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 21/11/17 в 12:12 |
Мы начинаем публикацию статей об использовании A-Parser для решения различных задач.
В этом сборнике будет рассмотрено использование А-Парсера SEO-специалистами и маркетологами, а также описан реальный пользовательский опыт работы. Поехали!
A-Parser для SEO специалиста
В статье рассмотрена актуальность использования A-Parsera в работе SEO мастера. Определено место парсера в системе SEO оптимизации. На конкретных примерах продемонстрирована его практическая ценность.
Интернет-маркетинг и A-Parser
В статье рассмотрены понятия интернет-маркетинга и место в нем A-Parser. Актуализирован вопрос целесообразности использования парсера для интернет-маркетинга. Показаны практические примеры использования парсера в области интернет-маркетинга.
Как я пришел к покупке A-Parser в 2016 году!
Описание реального опыта использования парсера одним из наших пользователей. На примере одной из задач показан подход к ее решению и реальная финансовая выгода.
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
С нами с 03.06.13
Сообщения: 278
Рейтинг: 37
|
| Добавлено: 04/12/17 в 13:00 |
1.2.31 - x64 для Windows, обновление JS движка, улучшения работы с сохраненными заданиями
Улучшения
- Для Windows начат выпуск 64-битных сборок
- Переработан интерфейс выбора сохраненных заданий, теперь пресеты можно сортировать по папкам любой вложенности
- Реализована "ленивая" загрузка сохраненных пресетов
- В 64-битных windows/linux версиях обновлен JavaScript движок V8 до версии 6.3
 SE::Bing::Translator полностью переписан, исправлена проблема, когда не переводился текст с html тегами и двойными кавычками, а также теперь переводятся большие тексты
- Добавлено автодополнение Provider url для CapMonster в
 Util::ReCaptcha2
- Добавлена возможность парсинга Cloudflare protected e-mails в
 HTML::EmailExtractor
- Добавлена сортировка JS парсеров внутри папок
- Уведомление о новой версии перенесено в статусбар
- Улучшена плавность при просмотре логов в Тестовом парсинге
Исправления в связи с изменениями в выдачи
Исправления
- Исправлен баг, при котором список пресетов антигейта не обновлялся после создания нового
- Исправлены падения парсера при использовании удаленного пресета антигейта
- Исправлена работа через API при вызове сохраненного задания
- Исправлена ошибка с $followlinks в
 HTML::LinkExtractor
- Исправлено определение кодировки на некоторых сайтах
- Исправлен подсчет неудачных запросов в некоторых случаях
- Исправлена ошибка с Custom template в фильтрах
- Исправлена работа кнопки Обновить в логах
- Исправлена ошибка Can't call method "Parser::HTML::Util::urlFromHTML", возникшая в одной из предыдущих версий
- Исправлены зависания при использовании уникализации в некоторых случаях
- Исправлена проверка обновлений после смены канала
|
|
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
| |
Текстовая реклама в форме ответа
Заголовок и до четырех строчек текста
Длина текста до 350 символов
Купить рекламу в этом месте! |
|
Спонсор сайта
|
Check::BackLink улучшена обработка nofollow
SE::QIP для некоторых запросов не корректно определялась кодировка сниппетов
SE::Google::Mobile - парсер мобильной и современной десктоп выдачи(режим переключается в настройках)
