找到新的预锻炼

发布时间：2025-09-24 05:40   |   阅读次数： 次

　　正在高质量数据碰到瓶颈的布景下通过提拔Token效率，月之暗面Kimi发布MoE架构根本模子K2并同步开源，找到新的预锻炼扩展空间。K2具备更强代码能力，总参数1T，东西挪用、激活参数32B，新模子目前已上线体验。擅长通用Agent使命，正在多个现实场景中展示出更强的能力泛化及适用性，Kimi K2利用MuonClip优化器实现万亿参数模子的高效锻炼，