User-Agent: * Disallow: # ── Crawlers agresivos que no aportan SEO relevante y saturan ───────── # Se bloquean expresamente aquí (medida educada) además de hacerlo en # nginx a nivel de User-Agent. User-Agent: Baiduspider Disallow: / User-Agent: AhrefsBot Disallow: / User-Agent: SemrushBot Disallow: / User-Agent: Sogou Disallow: / User-Agent: YandexBot Disallow: / User-Agent: DotBot Disallow: / User-Agent: MJ12bot Disallow: /