MassArticleParser - массовый парсинг статей

Что это

MassArticleParser — это специализированное программное обеспечение для операционных систем Windows 7, 8 и 10, предназначенное для автоматизированного сбора контента с веб-ресурсов. Инструмент позволяет массово выгружать статьи с указанных пользователем сайтов без необходимости сложной настройки параметров.

Основной функционал

• Автоматическое определение начала и конца статьи: программа самостоятельно распознает границы контента и отсекает лишние элементы страницы.
• Гибкие настройки сохранения: пользователь может выбирать формат выгрузки — сохранение статьи со всеми исходными тегами, только текстовое содержимое или только изображения.
• Интеллектуальная система фильтрации: в процессе работы создается база URL-адресов в папке urls, что исключает повторный обход уже обработанных страниц при последующих запусках.
• Простота эксплуатации: для запуска процесса достаточно внести список целевых сайтов в файл sites.txt и нажать кнопку START.
• Ограничения: программа не предназначена для работы с сайтами, имеющими активную защиту от парсинга, а также не обрабатывает контент, который подгружается динамически через JavaScript.

Что вы получаете

• Исполняемый файл программы MassArticleParser для Windows.
• Возможность автоматизированного сбора статей в локальную папку articles.
• Инструмент для ведения логов посещенных страниц, предотвращающий дублирование данных.
• Лицензионную копию продукта с привязкой к «железу» компьютера.
• Важное примечание: продукт имеет привязку к аппаратному обеспечению, что необходимо учитывать при установке.