Задача

Требуется разработать и развернуть Python-скрипт на VDS, который позволит перенести существующую логику выгрузки данных из CRM в Google Sheets, работавшую ранее на Google Apps Script. Основная цель - избежать ограничений по времени выполнения (таймаут 6 минут) и проблем с повторной авторизацией, возникающих при использовании Google Cloud. Система должна быть стабильной и безотказной.

Ключевые требования

• Ядро на Python: скрипт должен обрабатывать список из около 100 клиентов, используя их уникальные API-ключи для получения данных из CRM. Каждому клиенту соответствует своя таблица Google Sheets, куда необходимо выгружать данные.
• Единый сервисный аккаунт: все взаимодействие с Google Sheets должно осуществляться через один Google Service Account. Достаточно, чтобы клиент предоставил доступ к своей таблице электронной почте этого аккаунта, что упрощает безопасное подключение сторонних пользователей без индивидуальных настроек OAuth для каждого.
• Инкрементальная загрузка (догрузка): скрипт должен запрашивать из CRM только новые транзакции, начиная с момента последней записи в соответствующих Google Таблицах. Это позволит избежать повторной загрузки большого объема исторических данных при каждом запуске и минимизировать время выполнения.
• Проверка дубликатов: избегайте повторной записи дублирующихся платежей в таблицах. Поскольку у одного заказа может быть несколько частичных оплат, логика проверки дубликатов должна основываться на уникальном идентификаторе (ID) каждой отдельной транзакции, а только на номере заказа.
• Логирование изменений статуса: каждое обновление CRM (изменение статуса записи, называемое "Цикл сделки") должно фиксироваться в отдельном листе. В данном журнале необходимо сохранять: уникальный идентификатор записи (ID), старый статус, новый статус и точную дату изменения.