The Limiting Dynamics of SGD: Modified Loss, Phase-Space Oscillations, and Anomalous Diffusion.

Autor: Kunin, Daniel1 (AUTHOR) kunin@stanford.edu, Sagastuy-Brena, Javier1 (AUTHOR) jvrsgsty@stanford.edu, Gillespie, Lauren1 (AUTHOR) gillespl@stanford.edu, Margalit, Eshed1 (AUTHOR) eshedm@stanford.edu, Tanaka, Hidenori2 (AUTHOR) hidenori.tanaka@ntt-research.com, Ganguli, Surya1,3 (AUTHOR) sganguli@stanford.edu, Yamins, Daniel L. K.1 (AUTHOR) yamins@stanford.edu
Zdroj: Neural Computation. Jan2024, Vol. 36 Issue 1, p151-174. 24p.
Databáze: Academic Search Ultimate
Nepřihlášeným uživatelům se plný text nezobrazuje