Приветствую!
Неделю назад начал плотно изучать Go, и очень мне он поправился
Запилил небольшой многопоточный парсер галерей по списку тегов, прекрасно подойдет для владельцев сайтов с пиксовым контентом. Парсер тянет пиксовые галереи из одного из крупнейших сайтов, жмет их в архив, раскладывает по папкам и пишет данные в экспорт файл.
Экспорт файл содержит title|tags|rating|images_ammount|zip_path
Запускается на любом сервере, требований нет никаких, нативный бинарик. Парсер скомпилирован под linux, при необходимости могу скомпилировать под win, osx.
Использование:
./parser -gpt 20 -threads 15 -tags data/tags.txt -export data/export.txt
Значения по умолчанию, при запуске без параметров:
-gpt 25 //Кол-во скачиваемых галерей на каждый тег
-threads 5 //Кол-во потоков при скачивании
-tags data/tags.txt //Файл с тегами
-export data/export.txt //Файл с данными результата
Демо с ограничениями в кол-во потоков(5) и кол-во галерей(25) на тег можно
скачать и протестировать.
Версия без ограничений стоит $30.
Так же адаптирую парсер под ваш источник галерей за доп. плату.
Видео работы.
p.s. напишу для вас что нибудь на Go, парсеры, сервисы, движки и т.д.
p.s.s. Посмотрите так же
Кроппер на golang ( кастом тумбы и видео-тумбы на автомате )
