Документация WordPress

do_robots

do_robots() функция в WordPress генерирует виртуальный файл robots.txt.

Файл robots.txt используется для информирования поисковых систем о том, какие страницы или файлы на вашем сайте должны быть просмотрены и проиндексированы. Функция do_robots() отвечает за создание этого файла, когда делается запрос на /robots.txt.

Пример использования функции do_robots():

В этом примере мы создали пользовательскую функцию my_custom_robots(), которая запрещает доступ к директории /wp-admin/. Затем мы используем функцию add_action(), чтобы добавить эту функцию в хук действия do_robotstxt. Это гарантирует, что наша пользовательская функция my_custom_robots() будет вызвана, когда функция do_robots() создаст виртуальный файл robots.txt.

По умолчанию WordPress генерирует виртуальный файл robots.txt, который позволяет просматривать все страницы и посты на вашем сайте. Вы можете использовать функцию do_robots() для настройки этого файла в соответствии с вашими пожеланиями.
Чтобы создать собственный файл robots.txt в WordPress, вы можете использовать плагины, Yoast SEO или All in One SEO Pack. Эти плагины предоставляют простой в использовании интерфейс для создания и редактирования файла robots.txt.

theme