Техническое задание: Восстановление индексации сайта

Основная проблема: сайт полностью отсутствует в выдаче поисковых систем Яндекс и Google. При проверке в инструментах для вебмастеров обнаружена ошибка, связанная с запретом на индексацию.

Ключевая задача

Выявить и устранить техническую причину, по которой главная страница и другие разделы сайта не индексируются поисковыми системами.

Что необходимо сделать

• Проанализировать сообщение об ошибке "URL запрещён к индексации тегом..." из Яндекс.Вебмастера.
• Провести полный аудит технической части сайта на наличие запрещающих индексацию директив.
• Проверить корректность файла robots.txt и метатегов (noindex, nofollow) на страницах сайта.
• Исследовать возможные проблемы с настройками хостинга или CMS, которые могут блокировать доступ поисковых роботов.
• Устранить найденные причины блокировки индексации.
• Обеспечить корректный ответ сервера при обращении поискового робота к главной странице и другим ключевым разделам.
• После исправлений отправить сайт на переобход в Яндекс.Вебмастер и Google Search Console.

Требования к результату

• Сайт должен успешно проходить проверку на доступность для роботов в панелях вебмастеров.
• Ошибка "URL запрещён к индексации" должна быть устранена.
• Страницы сайта должны начать появляться в поисковом индексе.

Исполнитель должен предоставить отчёт о проделанной работе с описанием найденных проблем и предпринятых действий по их устранению.