利好
百度开源文心 5.5 Flash 总参 2800 亿
17:12
据 Woofun AI 消息,继 2025 年 6 月文心 4.5 系列之后,时隔约 16 个月再次开源千亿参数级大模型 模型权重。该模型总参数达 2800 亿,每生成一个 Token 仅激活 140 亿参数,并使用 33.5 万亿 Token 从零预训练。官方将其与 、、 进行统一评测,30 项基准测试中有 24 项排名第一。
本次开放的是未经中训练和后训练的纯文本 Base 模型,主要供开发者继续进行领域微调、指令训练和强化学习。百度重新设计了长文本处理机制,43 层网络中有 37 层将每 128 个历史 Token 压缩成一条缓存记录,另外 6 层保留对原始内容的精细检索能力,以降低长文本处理的显存和计算开销。官方将其与 DeepSeek-V4-Flash-Base、腾讯 Hy3-preview-Base、小米 MiMo-V2.5-Base 进行统一评测,30 项基准测试中有 24 项排名第一。
百度表示,经过后训练的文心 5.5 Flash 将随后推出。许可证方面,文心 5.5 Flash 改用自定义协议,不授权在欧盟、英国和韩国使用;相关产品或服务过去连续 12 个月营收超过 5000 万美元的,商用前必须另行获得百度书面授权。
WOOFUN AI
影响力评估 · 一键速读
百度时隔约 16 个月再次开源千亿参数级大模型,且本次模型在多项基准测试中表现优异,显示出其在推理效率上的技术突破。自定义许可证及地域限制可能影响部分海外开发者及高营收企业的商用策略,需关注后续后训练版本的发布动态及合规要求。
WOOFUN AI 生成 · 仅供参考,非投资建议

评论
暂无评论