# Robots.txt para dramarlenesotogeriatra.com
# Última actualización: Enero 2025
# ====================================================

# Configuración para todos los bots
User-agent: *

# Permitir acceso a páginas principales
Allow: /
Allow: /index.html
Allow: /servicios.html
Allow: /contacto.html

# Permitir acceso a recursos estáticos esenciales
Allow: /css/
Allow: /js/
Allow: /img/
Allow: /vendor/

# Bloquear archivos de sistema y temporales
Disallow: /*.log$
Disallow: /*.bak$
Disallow: /*.tmp$
Disallow: /*.old$
Disallow: /.*

# Bloquear directorios administrativos si existen
Disallow: /admin/
Disallow: /backup/
Disallow: /temp/
Disallow: /test/
Disallow: /_*

# Bloquear archivos de configuración
Disallow: /.htaccess
Disallow: /.env
Disallow: /config/
Disallow: /*.config

# Permitir específicamente para bots de motores de búsqueda principales
User-agent: Googlebot
Allow: /
Allow: /css/
Allow: /js/
Allow: /img/
Crawl-delay: 1

User-agent: Bingbot
Allow: /
Allow: /css/
Allow: /js/
Allow: /img/
Crawl-delay: 1

User-agent: Slurp
Allow: /
Allow: /css/
Allow: /js/
Allow: /img/
Crawl-delay: 2

# Configuración específica para bots de redes sociales
User-agent: facebookexternalhit
Allow: /
Allow: /img/

User-agent: Twitterbot
Allow: /
Allow: /img/

User-agent: LinkedInBot
Allow: /
Allow: /img/

# Bloquear bots maliciosos conocidos
User-agent: BadBot
Disallow: /

User-agent: ia_archiver
Disallow: /

User-agent: ScreamingFrogSEOSpider
Disallow: /

User-agent: SiteAuditBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

# Configuración para bots de herramientas SEO legítimas
User-agent: SemrushBot
Crawl-delay: 10
Allow: /

User-agent: MozBot
Crawl-delay: 10
Allow: /

# Configuración especial para sitio médico
# Permitir bots médicos y de salud confiables
User-agent: HealthBot
Allow: /

User-agent: MedicalBot
Allow: /

# Sitemap - Indicar ubicación del sitemap XML
Sitemap: https://dramarlenesotogeriatra.com/sitemap.xml

# Notas adicionales:
# Este sitio web pertenece a la Dra. Marlene Soto, especialista en geriatría
# Ubicada en Ciudad Juárez, Chihuahua, México
# Servicios: Valoración geriátrica integral
# Teléfono: (656) 352-1931
# WhatsApp: +526563521931