自助推荐区
加入

Yuan2-M32-hf-int4

1年前发布 18 00

Yuan2.0-M32是一个具有32个专家的混合专家(MoE)语言模型,其中2个处于活跃状态。引入了新的路由网络——注意力路由器,以提高专家选择的效率,使模型在准确性上比使用传统路由器网络的模型提高了3.8%。Yuan2.0-M32从头开始训练,使用了2000亿个token,其训练计算量仅为同等参数规模密集型模型所需计算量的9.25%。在编码、数学和各种专业领域表现出竞争力,Yuan2.0-M32在总参数40亿中只有3.7亿活跃参数,每个token的前向计算量为7.4 GFLOPS,仅为Llama3-70B需求的1/19。Yuan2.0-M32在MATH和ARC-Challenge基准测试中超越了Llama3-70B,准确率分别达到了55.9%和95.8%。

数据评估

Yuan2-M32-hf-int4浏览人数已经达到18,如你需要查询该站的相关权重信息,可以点击"5118数据""爱站数据""Chinaz数据"进入;以目前的网站数据参考,建议大家请以爱站数据为准,更多网站价值评估因素如:Yuan2-M32-hf-int4的访问速度、搜索引擎收录以及索引量、用户体验等;当然要评估一个站的价值,最主要还是需要根据您自身的需求以及需要,一些确切的数据则需要找Yuan2-M32-hf-int4的站长进行洽谈提供。如该站的IP、PV、跳出率等!

关于Yuan2-M32-hf-int4特别声明

本站趣搜呀提供的Yuan2-M32-hf-int4都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由趣搜呀实际控制,在2025年1月23日 02:31收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,趣搜呀不承担任何责任。

相关导航

暂无评论

none
暂无评论...