明年开源全部底层代码!电信发布千亿参数大模型“星辰语义”
中关村在线
2023-11-11 00:25:19

原标题:明年开源全部底层代码!电信发布千亿参数大模型“星辰语义”

2023-11-10 20:53:47 作者:姚立伟

11月10日,2023数字科技生态大会暨展在广州正式开幕,中国电信的多个高管先后发布了多项产品、平台及技术更新。其中包括由中国电信人工智能科技总经理何忠江所发布的“星辰语义”大模型。

这款大模型是中国电信自主研发的新升级版,参数量从百万级别提升至千亿,并且各项能力也都有显著提升。据何忠江介绍,星辰语义大模型拥有超过12亿风格数据训练显存降低50%,推理速度提升4.5倍;中文意象理解生成能力提升30%,语义细粒度生成效果提升25%。

在创意提效方面,星辰语义的大规模机器学习系统生产时间相较以往减少92%,设计成本降低了95%。中国电信表示,“总体而言,这个千亿级别的大模型的效果有了非常显著的提升”,他们计划通过量化蒸馏的技术手段让这个模型能够以低成本商用。

此外,中国电信还计划加入到开源开放的行列中,今年年底将开源百亿级别的大模型,明年4月则会开源千亿级别的大模型。所有这些底层代码都会对外开放。同时还将提供超过1T字节的高质量清洗数据,并根据星辰大模型构建各种工具链,以满足不同用户的需求。

相关内容

热门资讯

方斌:让机器人指尖如人手,可感... 【“科协十一大”精神学习进行时】 近日,国家科学技术奖励大会、两院院士大会、中国科协第十一次全国代表...
财经深一度|当AI帮人决策“买... 新华社北京8月28日电题:当AI帮人决策“买单”,如何筑牢支付安全底线 新华社记者吴雨 “帮我订张机...
台风“沙德尔”过后农业复产指南... 今年第18号台风“沙德尔”(台风级)的中心已于今天(28日)8时05分前后在浙江台州玉环市坎门街道沿...
IG零封TT晋级,女明星都来给... LPL骑士之路精彩赛事依旧在火热进行中,今天的两场骑士之路对决都结束了,像是约好了一样,结果都是相同...
欧洲给AI数据中心配电源,中国... AI数据中心的电力焦虑,正在欧洲催生一种过去并不存在的产业政策。 8月25日,西班牙政府公布了一份新...