# ==============================================
# Azurally — robots.txt
# ==============================================
# Política para agentes de IA declarada vía Content Signals
# (https://contentsignals.org):
#   search=yes    → se permite indexar el contenido para búsqueda
#   ai-input=yes  → se permite usarlo como contexto/input de asistentes IA
#   ai-train=yes  → se permite usarlo para entrenar modelos
# ==============================================

# --- Reglas generales + Content Signals ---
User-agent: *

# --- Bots de IA: acceso permitido de forma explícita ---
# Los tokens van agrupados a propósito: por RFC 9309 un crawler que tiene
# grupo propio ignora el grupo "*" por completo, así que las reglas y la
# señal se repiten aquí. Un grupo por bot obligaría a repetirlas 25 veces.
#
# OpenAI
User-agent: GPTBot
User-agent: ChatGPT-User
User-agent: OAI-SearchBot
# Anthropic (Claude)
User-agent: ClaudeBot
User-agent: Claude-Web
User-agent: Claude-SearchBot
User-agent: anthropic-ai
# Google AI
User-agent: Google-Extended
User-agent: GoogleOther
# Perplexity
User-agent: PerplexityBot
User-agent: Perplexity-User
# Meta
User-agent: FacebookBot
User-agent: Meta-ExternalAgent
User-agent: Meta-ExternalFetcher
# Apple
User-agent: Applebot-Extended
# Amazon
User-agent: Amazonbot
# Microsoft (Copilot)
User-agent: Bingbot
# Otros bots de IA
User-agent: cohere-ai
User-agent: CCBot
User-agent: Bytespider
User-agent: YouBot
User-agent: PetalBot
User-agent: Diffbot
User-agent: DuckAssistBot
User-agent: iaskspider
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Content-Signal: search=yes, ai-input=yes, ai-train=yes

# --- Sitemap ---
Sitemap: https://azurally.com/sitemap_index.xml