Zobrazeno 1 - 10
of 2 199
pro vyhledávání: '"training instability"'
We uncover how SGD interacts with batch normalization and can exhibit undesirable training dynamics such as divergence. More precisely, we study how Single Shuffle (SS) and Random Reshuffle (RR) -- two widely used variants of SGD -- interact surprisi
Externí odkaz:
http://arxiv.org/abs/2302.12444
Autor:
Gilmer, Justin, Ghorbani, Behrooz, Garg, Ankush, Kudugunta, Sneha, Neyshabur, Behnam, Cardoze, David, Dahl, George, Nado, Zachary, Firat, Orhan
In this work, we study the evolution of the loss Hessian across many classification tasks in order to understand the effect the curvature of the loss has on the training dynamics. Whereas prior work has focused on how different learning rates affect
Externí odkaz:
http://arxiv.org/abs/2110.04369
Conference
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Autor:
Mohammed Megahed, Ammar Mohammed
Publikováno v:
IEEE Access, Vol 12, Pp 138716-138735 (2024)
Generative Adversarial Network (GAN) outperforms its peers in the generative models’ family and is widely used to generate realistic samples in various domains. The basic idea of GAN is a competition between two networks called a generator and disc
Externí odkaz:
https://doaj.org/article/960737c9d2cc4fb8ab65df59eec66d06
Conference
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Autor:
Stendal, J. A.1 (AUTHOR) johan.stendal@sintef.no, Bambach, M.2,3 (AUTHOR)
Publikováno v:
Journal of Intelligent Manufacturing. Oct2024, Vol. 35 Issue 7, p3331-3352. 22p.
Autor:
Jin, Rubo1 (AUTHOR) jinrubo18@nudt.edu.cn, Cheng, Jianda2 (AUTHOR) chengjianda@lyu.edu.cn, Wang, Wei1 (AUTHOR) wwang@nudt.edu.cn, Zhang, Huiqiang1 (AUTHOR) meiyiwen21@nudt.eud.cn, Zhang, Jun1 (AUTHOR)
Publikováno v:
Sensors (14248220). Aug2024, Vol. 24 Issue 15, p5006. 19p.
Publikováno v:
Insight: Non-Destructive Testing & Condition Monitoring. May2024, Vol. 66 Issue 5, p294-304. 11p.
Akademický článek
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Publikováno v:
Entropy. Dec2023, Vol. 25 Issue 12, p1657. 19p.