User-agent: *
Allow: /

# Запрещаем индексацию служебных страниц
Disallow: /admin/
Disallow: /private/
Disallow: /temp/
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/

# Запрещаем индексацию системных файлов
Disallow: /*.log$
Disallow: /*.bak$
Disallow: /*.tmp$
Disallow: /*.sql$
Disallow: /*.gz$
Disallow: /config/

# Параметры URL — фильтруем только трекинговые,
# canonical-ссылки выручают остальные.
Disallow: /*?utm_*
Disallow: /*?fbclid=*
Disallow: /*?gclid=*
Disallow: /*?yclid=*

# Явно разрешаем основные разделы (для прозрачности)
Allow: /knigi/
Allow: /igry/
Allow: /treningi/
Allow: /sobytiya/
Allow: /virtual-psychologist/
Allow: /fredi/
Allow: /blog/
Allow: /obo-mne/
Allow: /about/

# Карты сайта
Sitemap: https://meysternlp.ru/sitemap.xml
Sitemap: https://meysternlp.ru/sitemap-images.xml

# RSS-фид (Дзен, Пульс Mail.ru, читалки)
# https://meysternlp.ru/feed.xml

# Задержка для медленных ботов
Crawl-delay: 1

# Правила для конкретных ботов
User-agent: Yandex
Disallow: /admin/
Disallow: /private/
Crawl-delay: 2

User-agent: Googlebot
Disallow: /admin/
Disallow: /private/
Crawl-delay: 1

User-agent: Bingbot
Disallow: /admin/
Disallow: /private/
Crawl-delay: 1

# AI-краулеры — разрешаем, чтобы Фреди и Андрей Мейстер появлялись
# в ответах ChatGPT, Claude, Perplexity и т. п.
User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: YandexAdditional
Allow: /