Техническое задание: Защита и оптимизация доступа к сайту на 1С-Битрикс

Проблема

Система аналитики фиксирует более 15 000 прямых нецелевых заходов на сайт ежемесячно. Эта активность не относится к действиям реальных пользователей или роботов поисковых систем, но негативно влияет на ключевые метрики:

• Искажается средняя глубина просмотра
• Снижается среднее время нахождения на сайте
• Ухудшается общая картина поведения пользователей

Проблема негативно сказывается на аналитике и принятии решений с 2023 года.

Цель задачи

Полностью устранить или минимизировать нежелательную техническую активность на сайте для получения чистых и релевантных данных аналитики.

Основные задачи для исполнителя

• Проанализировать текущую структуру сайта и источники нежелательных заходов.
• Настроить корректное ограничение доступа для роботов и скраперов через файл robots.txt и другие механизмы.
• Реализовать техническую защиту сайта от прямых нецелевых запросов, влияющих на метрики.
• Обеспечить, чтобы после внесения изменений остался доступ для легитимных поисковых роботов (Google, Yandex и т.д.) и реальных пользователей.
• Предоставить отчет о проделанной работе и внесенных изменениях.

Требования к реализации

• Работа должна быть выполнена на платформе 1С-Битрикс.
• Изменения не должны нарушать основную функциональность сайта для реальных посетителей.
• Необходимо сохранить индексацию сайта поисковыми системами.