PANews·· 1 小时前精选AI 评分80
百度文心5.5 Flash Base正式开源
百度:文心5.5 Flash Base正式开源
AI 导读
百度开源了其基座模型文心5.5 Flash Base,采用MoE架构,总参数量2800亿,支持最长100万Token上下文。
推荐理由
原文给出了模型的技术参数和开源信息,读者可以据此了解其在AI领域的应用潜力。
原文
PANews 11月5日消息,百度正式开源最新基座模型文心5.5 Flash Base。ERNIE 5.5 Flash Base采用MoE架构,总参数量2800亿,每个Token激活140亿参数,使用33.5万亿个Token完成预训练,预训练上下文长度最高达128K,微调与推理阶段支持最长100万Token上下文。
分享至:
作者:PA一线
本内容只为提供市场信息,不构成投资建议。
关注PANews官方账号,一起穿越牛熊
推荐阅读
相关专题
热门文章
乌克兰央行反对加密货币合法化法案,要求立法者在最终投票前进行修订
PANews 快讯2分钟前
来源:PANews · panewslab.com