Sitemap: https://bluenova.com.ec/sitemap_index.xml

# ---------------------------------------------------------------
# Reglas generales. Aplican a TODOS los rastreadores que no tengan
# un grupo propio mas abajo: Googlebot, Bingbot, YandexBot, GPTBot,
# ClaudeBot, PerplexityBot, Applebot y demas heredan de aqui.
#
# NOTA: no se bloquea /wp-content/ ni /wp-includes/ a proposito.
# Google necesita el CSS y JS para renderizar y evaluar la pagina.
# ---------------------------------------------------------------
User-agent: *
Allow: /

# Areas administrativas
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /xmlrpc.php
Disallow: /wp-login.php

# Formularios y archivos privados
Disallow: /wp-content/uploads/wpforms/

# Busqueda interna (contenido duplicado infinito)
Disallow: /?s=
Disallow: /search/

# Feeds RSS por entrada, categoria y etiqueta.
# El feed principal /feed/ queda permitido a proposito.
Disallow: /*/feed/
Disallow: /comments/feed/

# Endpoints de API que no aportan a busqueda
Disallow: /wp-json/oembed/

# Parametros que generan duplicados
Disallow: /*?replytocom=
Disallow: /*?attachment_id=
Disallow: /*?p=
Disallow: /*?preview=

# ---------------------------------------------------------------
# Rastreadores de IA: permitidos de forma explicita para AEO/GEO.
# Heredan las reglas del bloque * de arriba.
#   ChatGPT/OpenAI ...... GPTBot, ChatGPT-User, OAI-SearchBot
#   Anthropic ........... ClaudeBot, Claude-User, Claude-SearchBot
#   Perplexity .......... PerplexityBot, Perplexity-User
#   Google IA ........... Google-Extended
#   Apple ............... Applebot, Applebot-Extended
#   Meta ................ meta-externalagent, FacebookBot
#   Otros ............... Amazonbot, CCBot, cohere-ai, MistralAI-User,
#                         DuckAssistBot, YouBot, Bytespider, DiffBot
# ---------------------------------------------------------------

# ---------------------------------------------------------------
# Rastreadores bloqueados: no aportan trafico ni valor SEO
# ---------------------------------------------------------------
User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: PetalBot
Disallow: /

User-agent: SeekportBot
Disallow: /

# ---------------------------------------------------------------
# Herramientas SEO: permitidas pero con freno para no saturar
# ---------------------------------------------------------------
User-agent: AhrefsBot
Crawl-delay: 30
Disallow: /wp-admin/
Disallow: /?s=

User-agent: SemrushBot
Crawl-delay: 30
Disallow: /wp-admin/
Disallow: /?s=

User-agent: DataForSeoBot
Crawl-delay: 60
Disallow: /wp-admin/
Disallow: /?s=