User-Agent: *
Allow: /
Disallow: /login
Disallow: /account
Disallow: /new/
Disallow: /new$
Disallow: /favorites
Disallow: /onboarding
Disallow: /messages
Disallow: /my
Disallow: /admin
Disallow: /dating/profile
Disallow: /dating/matches
Disallow: /dating/likes

User-Agent: Yandex
Allow: /
Disallow: /login
Disallow: /account
Disallow: /new/
Disallow: /new$
Disallow: /favorites
Disallow: /onboarding
Disallow: /messages
Disallow: /my
Disallow: /admin
Disallow: /dating/profile
Disallow: /dating/matches
Disallow: /dating/likes
Clean-param: q&sort&sub&metro /

# ИИ-поисковики. Мы РАЗРЕШАЕМ им читать сайт осознанно: наша аудитория всё
# чаще спрашивает «где снять жильё мигранту» не в поиске, а у ChatGPT, Алисы
# и Perplexity. Если бот не может прочитать страницы, он советует конкурентов
# или выдумывает ответ. Это разные боты, и молчание robots.txt каждый из них
# трактует по-своему, поэтому пишем прямо (аудит 2026-08-17).
#
# ⚠️ Разделяем два вида: поисковые (дают ссылку на нас, пускаем везде, кроме
# личных разделов) и обучающие краулеры. Закрывать личные разделы обязательно:
# там переписка и аккаунты.
User-Agent: OAI-SearchBot
User-Agent: ChatGPT-User
User-Agent: PerplexityBot
User-Agent: Perplexity-User
User-Agent: Claude-User
User-Agent: Claude-SearchBot
User-Agent: YandexAdditional
User-Agent: MistralAI-User
Allow: /
Disallow: /login
Disallow: /account
Disallow: /new/
Disallow: /new$
Disallow: /favorites
Disallow: /onboarding
Disallow: /messages
Disallow: /my
Disallow: /admin
Disallow: /dating/profile
Disallow: /dating/matches
Disallow: /dating/likes

# Обучающие краулеры: отдельная группа, не механизм показа в AI-поиске.
User-Agent: GPTBot
User-Agent: ClaudeBot
User-Agent: Google-Extended
User-Agent: Applebot-Extended
Allow: /
Disallow: /login
Disallow: /account
Disallow: /new/
Disallow: /new$
Disallow: /favorites
Disallow: /onboarding
Disallow: /messages
Disallow: /my
Disallow: /admin
Disallow: /dating/profile
Disallow: /dating/matches
Disallow: /dating/likes

Sitemap: https://aikena.kg/sitemap.xml
Sitemap: https://aikena.kg/sitemap/0.xml
Sitemap: https://aikena.kg/sitemap/1.xml
Sitemap: https://aikena.kg/sitemap/2.xml
Sitemap: https://aikena.kg/news-sitemap.xml