Техническое задание: Парсинг и отображение данных

Цель проекта

Разработать функционал для автоматического получения конкретного числового значения с заданного стороннего веб-ресурса и его публикации на целевом сайте.

Исходные условия

  • Целевой сайт в данный момент пуст (имеется только доменное имя).
  • На нём необходимо отображать одну динамически обновляемую цифру.

Источник данных

Данные необходимо получать с внешней страницы, содержащей информацию о торговых операциях. Требуется извлекать значение из раздела "Последние сделки".

Требования к реализации

  • Создать механизм парсинга (сбора данных) с указанного внешнего URL.
  • Точно определить и извлечь необходимое числовое значение из структуры страницы.
  • Реализовать отображение этого значения на целевом сайте.
  • Обеспечить корректную работу решения и своевременное обновление данных.

Важные примечания

В реализации необходимо соблюдать правила использования внешних данных и обеспечивать стабильность работы при возможных изменениях в структуре источника.

Настройка автоматического ежедневного переноса данных из AWS Athena в S3

Требуется специалист по AWS для создания стабильного пайплайна ежедневной выгрузки данных из партнерской платформы через Athena в наш S3-бакет. Работа включает автоматизацию запросов и организацию raw-слоя.