GuillaumeLample· @GuillaumeLample · X·· 8 小时前AI 评分
Mistral 发布 Mistral Large 4 预览版,1T 参数原生多模态
Mistral 发布新模型 Mistral Large 4(ML4,代号 le Chonk)的预览版,该模型拥有 1T 参数、49B 激活参数,原生具备多模态能力。作者称其处于开源模型前沿,是来自美国或欧洲的最强开源权重模型;预览版背后的 RL 训练仍在进行且未见饱和迹象,最终版本与模型权重将在月底前发布。
今天,我们发布了新模型 Mistral Large 4(ML4)的预览版,别名 le Chonk 🐈。
ML4 是一个拥有 1T 参数、49B 激活参数的模型,原生以多模态能力进行训练。
它处于开源模型的前沿,是迄今为止来自美国或欧洲的最强开源权重模型。
本次预览版背后的 RL 训练仍在进行中,且毫无饱和迹象——我们将在本月底前发布最终版本以及模型权重。
🧵
1/n
来源:GuillaumeLample · x.com