Cuándo usar qué norma Schatten-p en deep learning
Elige la norma Schatten-p según la dimensionalidad: normas pequeñas son óptimas en baja dimensión incluso con suavidad en Schatten-∞.Incluye escalado de lotes.
#normas schatten
Schattor: Métodos de la familia Schatten para optimización en deep learning
Descubre Schattor, una familia de métodos adaptativos basados en normas Schatten que unifica SGD y Muon para optimizar modelos de deep learning.