Задача

Выполнить полный аудит, стабилизацию и оптимизацию инфраструктуры живого производственного сервиса службы доставки. Сервис работает 24/7, простой до 10-15 минут в дневное время является критическим.

Текущие проблемы

  • Нестабильная работа резервного копирования БД и кода (не проверялись восстановлением)
  • Проблемы со статистикой и синхронизацией реплик БД
  • Единая точка отказа в виде общей NFS-папки (SPOF)
  • Разрыв дисковового пространства (раздувание логов) и частый дефицит оперативной памяти
  • Сертификаты и межсерверные доступы в неудовлетворительном состоянии
  • Избыточные расходы на серверные ресурсы

Текущая среда

PHP (Yii1), nginx, MySQL 8.0 (мастер + несколько реплик, отдельная реплика для аналитики/Metabase), Redis (master + replica), beanstalkd, GitLab, несколько серверов (prod/test), NFS, SSL/TLS, проксирование, защита от DDoS.

Объем работ: аудит

  • Описание фактической серверной и сетевой архитектуры
  • Выявление точек отказа (SPOF) и критических рисков
  • Анализ загрузки CPU, оперативной памяти, дисков - оценка избыточности и неоптимального использования ресурсов
  • Детальная проверка состояния бэкапов (целостность, расписание, площадки для хранения) и репликаций БД
  • Подготовка плана стабилизации и оптимизации с приоритетами

Объем работ: внедрение оптимизаций

  • Настройка надежных бекапов для MySQL, GitLab, Redis с обязательным тестовым восстановлением
  • Внедрение системы мониторинга и алертов по ресурсам, состоянию БД и uptime
  • Принудительная ротация и сжатие логов, оптимизация их хранения
  • Приведение в порядок сертификатов (управление, обновление, контроль сроков действия) и системы доступа (SSH keys, доступы по портам)
  • Разработка базовых операционных инструкций (runbooks) для штатных ситуаций
  • Контроль uptime vs затраты - снижение расходов на инфраструктуру под постоянную гарантированную производительность
  • Минимизация точек отказа (особенно зависимость от одной NFS, тестирование отказоустойчивости кластера Redis и реплик)

Проект рассчитан на 1-2 недели активной работы с основным упором на практические результаты, а не на документацию.