User-agent: *                  # правила для всех роботов
Disallow: /manager/            # авторизация
Disallow: /assets/components/  # папка с файлами modx пакетов
Disallow: /core/               # папка с системными файлами modx
Disallow: /connectors/         # папка с системными файлами modx
Disallow: /index.php           # дубль главной страницы index.php
Disallow: *?*                  # удаляем дубли для всех страниц (с параметрами)
Disallow: *openstat=           # ссылки с метками openstat
Disallow: *from=               # ссылки с метками from
Disallow: *utm*=               # ссылки с utm-метками
Allow: /*.jpg                  # здесь и далее открываем для индексации изображения, скрипты и прочие файлы
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.png
Allow: /*.webp
Allow: /*.pdf
Allow: /*.doc
Allow: /*.docx
Allow: /*.xls
Allow: /*.xlsx
Allow: /*.ppt
Allow: /*.pptx
Allow: /*.css
Allow: /*.js
Allow: *?page=                 # открываем для индексации страницы пагинации (и проверьте, чтобы для них был настроен canonical)

# Directives for modern AI Search Engines and LLMs (ChatGPT, Gemini, Claude, Perplexity, Applebot)
User-agent: ChatGPT-User
Allow: /llms.txt
Allow: /

User-agent: GPTBot
Allow: /llms.txt
Allow: /

User-agent: Google-Extended
Allow: /llms.txt
Allow: /

User-agent: ClaudeBot
Allow: /llms.txt
Allow: /

User-agent: PerplexityBot
Allow: /llms.txt
Allow: /

User-agent: Omgilibot
Allow: /llms.txt
Allow: /

User-agent: Anthropic-ai
Allow: /llms.txt
Allow: /

# Link to the LLM index file for GEO engines
LLMs-txt: https://himavangard.ru/llms.txt

Host: https://himavangard.ru/
# Укажите один или несколько файлов Sitemap
Sitemap: https://himavangard.ru/sitemap.xml