Стартовый robots.txt под WordPress: карта сайта, запрет техразделов и явный crawl-delay не нужен

Разбор задачи

Современные сборки генерируют robots из PHP; статический файл в корне остаётся валидным, если синхронизируете домен основного зеркала и не конфликтуете с плагинами SEO которые перехватывают маршрут.

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://example.ru/wp-sitemap.xml

Сервисные пути тем и кеш‑плагинов при необходимости добавляйте точечными Disallow, не блокируйте ресурсы, которые краулеры используют для рендеринга публичных страниц.

Замечания перед выкладкой

Вносите правки только через среду с бэкапом и понятным diff. После публикации сверьтесь со Search Console что выбрано верное зеркало и индекс sitemap успешно читается.