您当前的位置: 首页 >> 标签:Marin 的 Mochi 535B-A23B 完成主预训练,训练量 18T tokens
Marin Mochi 535B-A23B 完成主预训练 训练规模 18T tokens

Marin 项目的 Mochi 535B-A23B 混合专家大模型已经顺利完成主预训练阶段,整体训练数据量达到 18 万亿 tokens,这是斯坦福 Percy 浏览全文>>

站长推荐