# Archivo robots.txt 

# ---------------------------
# Bloque Yoast: Permite acceso completo a todos los bots
User-agent: *
Disallow:

# Permitir el rastreo de todas las páginas y recursos importantes a Googlebot
User-agent: Googlebot
Disallow:

# Bloqueo de recursos no esenciales para el rastreo
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

# Permitir acceso a archivos CSS y JS esenciales
Allow: /wp-includes/js/
Allow: /wp-includes/css/

# Bloquear URLs que terminan en /feed/
Disallow: /*/feed/

# Bloquear URLs que tienen números (formato de fecha)
Disallow: /blog/[0-9]{4}/[0-9]{1,2}/[0-9]{1,2}/

# URL del sitemap para facilitar la indexación
Sitemap: /sitemap_index.xml

# ---------------------------
# Fin del archivo robots.txt