# robots.txt for https://urany.net/ Sitemap: https://urany.net/sitemaps-1-sitemap.xml # Allow AI crawlers User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: GPTBot Allow: / User-agent: anthropic-ai Allow: / User-agent: ClaudeBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / User-agent: BingBot Allow: / # live - carpetas de sistema User-agent: * Disallow: /cpresources/ Disallow: /vendor/ Disallow: /.env Disallow: /cache/ Disallow: /storage/ # BLOQUEO DE TOKENS Y PARÁMETROS (Limpia las redirecciones en GSC) Disallow: /*?token=* Disallow: /*&token=* Disallow: /*?lang=* Disallow: /index/ Disallow: /*.d.ts$ # BLOQUEO DE BÚSQUEDAS (Evita contenido duplicado) Disallow: /*?q=* # NOTA: Se eliminaron los Disallow de JAKA y Blog viejo para que # Google pueda entrar y eliminarlos de su índice tras recibir un 404/301. Allow: /