Ситуация

Система веб-анализа предоставила отчет, который показывает, что значительное количество веб-страниц проекта не может быть проиндексировано. Владелец хочет разобраться в корне проблемы и решить ее, чтобы все страницы появились в поиске.

Задачи

• Провести детальный анализ отчета об ошибках индексации в панели управления сайтом.
• Выполнить аудит всех ключевых технических факторов, влияющих на поисковых роботов, а именно: наличие и корректность файла robots.txt, настройки карты сайта (sitemap.xml), статусы ответов сервера (особенно 404 и ошибки 5xx), работу редиректов, установленные атрибуты noindex, скорость загрузки ресурсов для робота.
• Составить список конкретных технических неисправностей, из-за которых страницы выпадают из индекса или не индексируются.
• Применить необходимые технические и код-исправления для устранения всех выявленных проблем.
• Запросить ручную проверку и отправить исправленные страницы на повторную индексацию через инструмент системы веб-анализа.

Требования к исполнителю

• Обязателен реальный опыт практической работы с Google Search Console (и аналогичными системами) и технической оптимизацией сайтов (Technical SEO).
• Глубокое понимание процессов сканирования (краулинга) и индексации веб-сайтов поисковыми системами.
• Умение корректно настраивать robots.txt, редактировать sitemap и анализировать серверные логи будет серьезным плюсом.
• Специалист должен приготовиться дать взвешенное письменное пояснение по всем выполненным шагам.

Что вы получите в итоге

• Все технические препятствия для добавления страниц в индекс будут успешно устранены.
• Страницы, которые должны были быть проиндексированы, гарантированно будут проходить проверку через любой инструмент GSC, например, через функцию "Проверить URL по базе".
• Краткий, но полный отчёт, где перечислено что сделано и какие настройки были изменены.