# Robots.txt para Sultana Web
# https://sultanaweb.com/robots.txt

# Permitir acceso a todos los bots principales
User-agent: *
Allow: /

# Bloquear archivos y directorios no públicos
Disallow: /admin/
Disallow: /_next/static/chunks/
Disallow: /api/
Disallow: /.well-known/
Disallow: /temp/
Disallow: /private/

# Bots específicos de búsqueda
User-agent: Googlebot
Allow: /
Crawl-delay: 1

User-agent: Bingbot  
Allow: /
Crawl-delay: 1

User-agent: facebookexternalhit
Allow: /

User-agent: Twitterbot
Allow: /

# Bots de redes sociales
User-agent: WhatsApp
Allow: /

User-agent: LinkedInBot
Allow: /

# Bloquear bots problemáticos
User-agent: MJ12bot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MajesticSEO
Disallow: /

# Archivos del sitio
Sitemap: https://sultanaweb.com/sitemap.xml
Host: sultanaweb.com

# Información adicional
# Contacto: contacto@sultanaweb.com
# Política: /aviso-de-privacidad