Bytespider
Operado por Ampliamente atribuido a ByteDance · Ampliamente atribuido a ByteDance · Finalidad no documentada oficialmente
Crawler web ampliamente atribuido a ByteDance. Su finalidad exacta y su uso para el entrenamiento de IA no han sido confirmados oficialmente.
Qué hace
Bytespider se atribuye ampliamente a ByteDance. Su finalidad exacta —incluido si se utiliza para recopilar datos de entrenamiento de IA— no ha sido confirmada oficialmente por ByteDance.
Diversas fuentes independientes describen Bytespider como un crawler de gran volumen que, en ocasiones, no respeta de forma fiable las directivas de robots.txt. Sin embargo, dado que esta información procede de observaciones de terceros y no de documentación de ByteDance, ELNIQ la presenta como información reportada, no como un hecho confirmado.
Por qué el bloqueo es opcional
- No existe documentación oficial de ByteDance que confirme la finalidad o el comportamiento de este crawler.
- Diversas fuentes independientes señalan que no siempre respeta robots.txt.
- Si necesitas garantizar el bloqueo, considera aplicarlo a nivel de servidor o WAF.
Identificación y robots.txt
Bytespider
No existe ningún método de verificación oficial documentado.
User-agent: Bytespider
Disallow: /