Описание задачи

Имеется частично реализованный парсер. Требуется доработать его следующим образом:

  • Объединить функционал сбора ссылок и парсинга товаров в единый конвейер.
  • Оптимизировать работу с прокси-серверами и механизм смены геолокации.

Основные требования

1. Объединение парсинга

Создать единый модуль, который последовательно собирает ссылки и на их основе парсит карточки товаров. Исключить дублирование кода и промежуточные файлы.

2. Работа с прокси и геолокацией

Улучшить планировщик смены прокси: учитывать лимиты, время отклика, типы прокси (http, socks). Добавить функцию имитации смены страны для преодоления региональных ограничений. Механизм должен автоматически выбирать наиболее быстрый рабочий прокси.

Примечания

Все конфиденциальные данные исполнитель заменяет на обобщенные переменные окружения. Детали уточняется в переписке.

Разработка и дизайн лендинга с интерактивным тестом

Требуется команда из 2-3 специалистов для создания адаптивного лендинга с интерактивным тестом, генерацией персональных карточек и интеграцией формы сбора заявок. Дизайн должен быть согласован с наружной рекламой.