Техническое SEO: robots.txt, XML-карта сайта и владелец настроек
Вкладка Техническое SEO (Baza Helper > Техническое SEO) управляет файлами, которые читают поисковые системы: robots.txt и XML-картой сайта. Заголовки страниц, описания, канонические адреса и индексация остаются в панели SEO страницы каждой записи.
Владелец технического SEO
Выберите Модуль технического SEO. Вариант Автоматически: тема или обнаруженный SEO-плагин позволяет Baza Helper уступить теме или SEO-плагину, которые уже управляют этими файлами. Выберите другой вариант, если хотите, чтобы ими управлял Baza Helper. Когда техническим SEO владеет кто-то другой, вкладка сообщает об этом, а изменения robots и карты сайта от темы пропускаются.
robots.txt
Включите Управлять виртуальным robots.txt. WordPress строит robots.txt на лету, а этот параметр добавляет к нему ваши пути и адрес карты сайта.
- Дополнительные пути Disallow: один путь в строке, например
/private/. Путь без начального слеша получает его. Базовая защита wp-admin и доступ к admin-ajax сохраняются всегда. - Дополнительные пути Allow: один путь в строке, чтобы разрешить путь внутри заблокированной папки. Не блокируйте CSS, JavaScript и изображения.
- Файл: показывает, действуют ли настройки, и содержит ссылку Открыть robots.txt.
robots.txt управляет сканированием, а не индексацией. Чтобы скрыть страницу из результатов поиска, используйте параметр noindex страницы.
Почему изменение не появляется
- В папке сайта есть настоящий файл robots.txt. Веб-сервер отдаёт его до запуска WordPress, поэтому настройки его не меняют. Отредактируйте или удалите файл, чтобы настройки заработали.
- Старую копию хранит кеш хостинга, CDN или браузера. Очистите его после сохранения.
- Режим Dev / staging заменяет robots.txt на
Disallow: /, пока он активен.
XML-карта сайта
Включите Включить XML-карту сайта. WordPress создаёт XML со страницами и настоящими датами изменений. Приватные страницы, страницы под паролем, noindex и неканонические страницы исключаются, а параметр видимости в разделе Настройки > Чтение учитывается. sitemap.xml перенаправляет на канонический индекс карты сайта WordPress.
- Типы записей в карте сайта: выберите, какие типы содержимого попадают в список.
- Включить архивы авторов и Включить публичные архивы таксономий добавляют эти страницы.
- Открыть sitemap.xml показывает результат.
Запрет индексации для поисковых систем
Если на рабочем сайте в разделе Настройки > Чтение отмечен пункт «Попросить поисковые системы не индексировать сайт», Baza Helper показывает предупреждение со ссылкой вверху панели управления и этой вкладки. Его видят только администраторы.
