# micm.mx — robots.txt # # Los crawlers de IA están permitidos A PROPÓSITO (estrategia GEO, 2026-07): # queremos que ChatGPT, Gemini, Claude y Perplexity puedan leer y citar el sitio. # Si Cloudflare tiene activo su "managed robots.txt" o el bloqueo de AI bots, # ese bloqueo se antepone a este archivo — ver docs/GEO_PLAYBOOK.md (Fase 0). # # Las rutas privadas (/dashboard, /admin, …) NO se bloquean aquí: se marcan con # X-Robots-Tag: noindex en el servidor. Un Disallow impediría que el crawler # viera justamente esa señal de noindex. # Búsqueda clásica User-agent: Googlebot Allow: / User-agent: Bingbot Allow: / # Previews sociales User-agent: Twitterbot Allow: / User-agent: facebookexternalhit Allow: / # IA — índices de búsqueda en vivo User-agent: OAI-SearchBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Claude-SearchBot Allow: / # IA — visitas disparadas por un usuario (el momento de conversión) User-agent: ChatGPT-User Allow: / User-agent: Claude-User Allow: / User-agent: Perplexity-User Allow: / # IA — entrenamiento (memoria de modelos futuros) User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Google-Extended Allow: / User-agent: CCBot Allow: / User-agent: meta-externalagent Allow: / User-agent: * Allow: / Sitemap: https://micm.mx/sitemap_index.xml # Descripción del producto para LLMs (datos del sitio, no un sitemap): # https://micm.mx/llms.txt