Необходимо разработать парсер (скрапер) для автоматического скачивания файлов.
Основные задачи:
- Автоматический сбор ссылок на целевые файлы (любого формата).
- Многопоточная или асинхронная загрузка для ускорения процесса.
- Обработка ошибок скачивания, повторные попытки.
- Поддержка обхода базовой защиты (лимиты запросов, куки).
Требования к кандидату:
Пожалуйста, предоставьте краткое портфолио или примеры похожих выполненных работ. После этого готов обсудить детали и специфику задачи (включая архитектуру карты сайта и требования к прокси) подробнее в личной переписке.
Ожидается, что итоговый код будет легко поддерживаться и документирован.