11月4日,据腾讯科技消息,腾讯混元正式发布新一代大语言模型Hy4。相比此前的Hy4 preview,新模型进一步扩大预训练和后训练规模,首次引入视觉理解能力,并重点强化指令遵循、长文本理解、长程Agent及真实生产力任务表现。Hy4总参数规模为770B,采用混合专家架构,并首次支持电脑操作,能够结合命令行与图形界面执行复杂任务。从评测结果来看,Hy4已跻身全球第一梯队开源模型行列,模型权重也将于近期开源。混元团队表示,尽管Hy4已经是目前最强的开源模型之一,但与顶尖闭源模型仍然存在较大差距。混元将持续稳健地扩展预训练和后训练规模,努力缩小和顶尖闭源模型的差距。针对模型在网络和生物等方面潜在的安全风险,混元以更负责任的方式进行训练、开源与发布。

暂无评论