vivo 自研蓝心大模型 7B 现已向全行业开源
IT之家
2023-11-09 13:21:39

原标题:vivo 自研蓝心大模型 7B 现已向全行业开源

IT之家 11 月 9 日消息,在近日的 2023 vivo 开发者大会上,vivo 宣布率先开源 70 亿参数级的蓝心大模型 7B 以及对应的微调框架。

按照承诺,vivo 现已在 Hugging Face 上正式开源了 BlueLM-7B,IT之家小伙伴可在 。

BlueLM-7B 开源大模型包括 7B 基础模型和 7B 对话模型,同时 vivo 开源了支持 32K 的长文本基础模型和对话模型。

据介绍,BlueLM 采用高质量语料库进行训练,规模达到了 2.6 万亿 的 token 数,该语料库包含中文、英文以及少量日韩数据。其中 BlueLM-7B-Chat 在 C-Eval 和 CMMLU 上均取得领先结果。

BlueLM-7B-Base-32K 和 BlueLM-7B-Chat-32K 均支持 32K 长文本,在保持基础能力相当情况下,能够支持更长上下文理解。

相关内容

热门资讯

探访河北首家OPC社区:一个工... 长城网·冀云客户端记者 许艳艳 “我们是河北首家OPC创新社区,在这里,一个工位就是一家公司,可以实...
7000万预约,《王者万象棋》... 8月27日,《王者万象棋》定档发布会正式举行。发布会上,《王者万象棋》正式宣布:产品全网预约量突破7...
网易有道发布AI耳机OpenP... 本报讯 (记者袁传玺)8月27日,网易有道正式发布OpenPods有道AI耳机。作为首款专为iPho...
中国联通贵阳市分公司:跑出网络... 2026中国国际大数据产业博览会于8月28日至30日在贵阳国际会议展览中心拉开帷幕。本届数博会由国家...
原创 骑... 北京时间2026年8月28日,英雄联盟LPL季后赛迎来了首日骑士之路的正式对决。这一天共有两场比赛,...