中国移动、电子标准院及16家重点央企发布《通用大模型评测标准》
创始人
2024-10-12 16:01:55

IT之家 10 月 12 日消息，IT之家从中国移动官方获悉，在今天召开的 2024 中国移动全球合作伙伴大会期间，中国移动联合电子标准院及 16 家重点央企共同开展大模型评测体系建设工作，并发布《通用大模型评测标准》。

据介绍，该标准是大模型评测体系建设的重要成果，为产业界遴选优质大模型提供重要参考依据。第一阶段将围绕通用领域和 4 个重点行业领域，从评测标准制定、评测基地建设、评测试点应用等方面开展工作。

通用大模型评测标准基于“2-4-6”框架如下：

  • “2”：两类评测视角，以重点行业实际使用需求为导向，与国标对模型能力要求拉齐，将评测任务划分为理解和生成两类视角。
  • “4”：四类评测要素，从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素，确保评测工作可实施性。
  • “6”：六大评测维度，综合考虑大模型应用过程中的核心能力，设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。

上一篇：智能摊铺机助力京港澳高速改扩建提质增效

下一篇：原创 十一单机销量Top10：前二被苹果霸占，安卓旗舰只有华为

相关内容

热门资讯

房卡必备“6人炸金花房间卡怎么... 您好！炸金花链接房卡可以通过以下几种方式购买：打开微信添加客服【56001354】，微信渠道：微信游...
房卡必备“炸金花房卡从哪里买/... 您好！炸金花链接房卡可以通过以下几种方式购买：打开微信添加客服【66336574】，微信渠道：微信游...
房卡必备“牛牛链接充值房卡/微... 您好！炸金花链接房卡可以通过以下几种方式购买：打开微信添加客服【71319951】，微信渠道：微信游...
房卡必备“牌九房卡找谁买划算/... 您好！炸金花链接房卡可以通过以下几种方式购买：打开微信添加客服【8488009】，微信渠道：微信游戏...
房卡必备“金花好友房怎么创建/... 您好！牛牛链接房卡可以通过以下几种方式购买：打开微信添加客服【55051770】，微信渠道：微信游戏...