Цель работы

Разработать программное обеспечение (парсер), которое позволит автоматизировать процесс сбора данных из открытых веб-источников. Собранная информация должна быть пригодна для анализа в рамках научных исследований.

Основные требования

• Автоматизированный поиск и извлечение текстовой информации из сети интернет
• Обработка новостных, аналитических и статистических материалов
• Фильтрация данных по заданным тематикам (социальная, политическая, экономическая)
• Экспорт результатов в удобный для анализа формат

Дополнительные условия

Система должна быть разработана с учетом прозрачности алгоритмов работы и возможности дальнейшей модификации для расширения списка источников. Код должен быть написан на Python или другом языке, поддерживающем веб-скрапинг.