ziwang-com / AGM

AGM阿格姆:AI基因图谱模型,从token-weight权重微粒角度,探索AI模型,GPT\LLM大模型的内在运作机制。

Home Page:http://www.m-f.vip

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

合并语言模型权重实现无数据知识融合

ziwang-com opened this issue · comments

https://github.com/bloomberg/dataless-model-merging

通过合并语言模型权重实现无数据知识融合的代码发布 (https://openreview.net/forum?id=FCnohuR6AnM)

该存储库包含实验代码,用于通过合并语言模型的权重来重现无数据知识融合的结果,该论文将在 2023 年 5 月 1 日至 5 日在卢旺达基加利举行的第十一届学习表示国际会议 (ICLR 2023) 期间发表。