Sven: Singular Value Descent als effizienter Natural Gradient Algorithmus
Ein neuer Optimierungsalgorithmus namens Sven (Singular Value dEsceNt) wurde vorgestellt, der neuronale Netzwerke schneller und genauer trainieren kann, indem er die Verlustfunktion in einzelne Datenpunkte zerlegt, stat…