关闭

Tryaivo™技术

文心开源5.5 Flash Base:2800亿MoE

2026-11-06 01:00:25 浏览:

文心开源5.5 Flash Base:2800亿MoE

11月5日,百度正式开源最新基座模型文心5.5 Flash Base,采用MoE架构,总参数2800亿、每个Token激活140亿参数,在知识、推理、数学、代码、多语言与长上下文等基准上取得同尺寸SOTA。消息带动百度港股收盘涨超5%、美股盘前涨超2%。

事件经过

11 月 5 日,百度在官网产品动态中挂出 ERNIE 5.5 Flash Base 正式发布,同步把基座模型权重对外开放。资本市场同步反应:百度港股当日收盘涨超 5%,美股盘前涨超 2%。

关键能力与数据

文心 5.5 Flash Base 采用 MoE(混合专家)架构,总参数量 2800 亿,每次推理每个 Token 激活约 140 亿参数,属于用稀疏激活控制推理成本的设计。官方口径称,该模型在知识、推理、数学、代码、多语言与长上下文等多个基准测试中取得同尺寸模型的 SOTA 表现。开源基座通常面向二次训练与私有化部署,与直接面向终端的产品版本定位不同。

行业意义

开源基座的意义在于把“可用起点”交出去:企业可以在自有数据上继续后训练,而不必从零预训练。对百度而言,这也是把文心系列从产品叙事转向生态叙事的动作——权重开放后,衡量标准会从榜单名次变为衍生模型数量与实际部署规模。国内开源竞争已进入“尺寸相近、比效率”的阶段,MoE 的激活比例正成为新的比较维度。

原文出处:格隆汇 / 第一财经 / 百度文心官网

标签: 文心一言、AI资讯、大模型动态

(内容由AI生成,仅供参考)

推荐文章