# Acceso completo al bot de OpenAI
User-Agent: OpenAI-GPT
Allow: /en/
Allow: /

# Reglas específicas para Googlebot-News
User-agent: Googlebot-News
Allow: /

# Reglas generales para Googlebot y otros bots
User-agent: Googlebot
Allow: /
Disallow: /system/          # Restringir acceso a áreas administrativas
Disallow: /.content/        # Restringir acceso a contenido interno
Disallow: /nav/             # Evitar rastreo de la navegación

# Acceso a secciones específicas
Disallow: /en/invest-in-spain/  # Bloquear esta carpeta específica en inglés

# Declaración de sitemaps
Sitemap: https://www.mispeces.com/sitemapindex.xml
Sitemap: https://www.mispeces.com/sitemap.xml
Sitemap: https://www.mispeces.com/en/google-news-english.xml
Sitemap: https://www.mispeces.com/google-news-sitemap.xml
Sitemap: https://www.mispeces.com/google-news-sitemap-2023.xml
Sitemap: https://www.mispeces.com/sitemap-reportajes.xml
Sitemap: https://www.mispeces.com/en/sitemap-en.xml