Zobrazeno 1 - 10
of 96
pro vyhledávání: '"Fan, Dongyang"'
On-device LLMs have gained increasing attention for their ability to enhance privacy and provide a personalized user experience. To facilitate learning with private and scarce local data, federated learning has become a standard approach, though it i
Externí odkaz:
http://arxiv.org/abs/2409.13931
Publikováno v:
COLM 2024
We explore on-device self-supervised collaborative fine-tuning of large language models with limited local data availability. Taking inspiration from the collaborative learning community, we introduce three distinct trust-weighted gradient aggregatio
Externí odkaz:
http://arxiv.org/abs/2404.09753
In this study, we systematically evaluate the impact of common design choices in Mixture of Experts (MoEs) on validation performance, uncovering distinct influences at token and sequence levels. We also present empirical evidence showing comparable p
Externí odkaz:
http://arxiv.org/abs/2402.13089
We consider a collaborative learning setting where the goal of each agent is to improve their own model by leveraging the expertise of collaborators, in addition to their own training data. To facilitate the exchange of expertise among agents, we pro
Externí odkaz:
http://arxiv.org/abs/2305.18497
Publikováno v:
AAAI 2024
Batch Normalization (BN) is widely used to stabilize the optimization process and improve the test performance of deep neural networks. The regularization effect of BN depends on the batch size and explicitly using smaller batch sizes with Batch Norm
Externí odkaz:
http://arxiv.org/abs/2305.17205
Autor:
Zhang, Hao, Huang, Yuzhou, Du, Xinru, Yang, Yequn, Li, Shengquan, Fan, Dongyang, Xiao, Xi, Mutsuda, Hidemi, Jiao, Pengcheng
Publikováno v:
In Nano Energy January 2024 119
Akademický článek
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Akademický článek
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Akademický článek
Tento výsledek nelze pro nepřihlášené uživatele zobrazit.
K zobrazení výsledku je třeba se přihlásit.
K zobrazení výsledku je třeba se přihlásit.
Autor:
FAN Dongyang, WANG Qiang, ZHOU Yijun, LI Siwen, FENG Xu, LIU Chunran, CUI Jiasen, SUN Hongchen
Publikováno v:
口腔疾病防治, Vol 29, Iss 4, Pp 284-288 (2021)
Currently, titanium alloys are widely used in the field of stomatology; however, owing to long-term exposure to a complex microbial environment, dental plaques easily form on the surface of the materials, affecting the use efficiency and the service
Externí odkaz:
https://doaj.org/article/8ea2cbb2fdf14c3bacfb7c6260c9c1ea