Safetensors nació en Hugging Face para resolver un problema concreto: compartir pesos de modelos sin riesgo de ejecutar código arbitrario. En vez de depender de formatos basados en pickle, que podían esconder código malicioso, se diseñó una alternativa simple y segura que hoy domina la distribución de modelos en la comunidad abierta.

Qué es safetensors y por qué importa

El formato es intencionalmente sencillo: un encabezado JSON (con un límite de 100MB) que describe la metadata de los tensores, seguido por los datos crudos de los tensores. Esto permite varias ventajas técnicas clave:

• Zero-copy loading: los tensores se pueden mapear directamente desde disco sin copiar datos innecesarios a memoria. Piensa en mmap aplicado a pesos de modelos.
• Lazy loading: puedes leer pesos individuales sin deserializar un checkpoint entero, útil para transfer learning o carga selectiva en clusters.