Cuatro sobre seis: cuantización NVFP4 más precisa con escalado de bloque adaptativo
Mejora la precisión en cuantización NVFP4 con escalado de bloque adaptativo. Descubre el método Cuatro sobre seis para optimización de modelos.
#nvfp4
TetraJet-v2: Entrenamiento Preciso de NVFP4 para Modelos de Lenguaje Grandes con Supresión de Oscilaciones y Control de Outliers
TetraJet-v2 optimiza el entrenamiento NVFP4 en LLMs suprimiendo oscilaciones y outliers para lograr mayor precisión.