智源研究院联合共建单位发布中文互联网语料库
中国证券报
2023-11-30 04:51:52
0次
中证网讯（记者 彭思雨）11月29日，智源研究院联合拓尔思等共建单位发布并开源可信中文互联网语料库（CCI v1.0.0）。该中文互联网语料库数据规模达104GB，语料库时间跨度在2001年1月至2023年11月。语料库数据主要来源于地市级以上政府门户网站、重点新闻网站、中央和地方报刊杂志、出版社等。
北京智源人工智能研究院副院长兼总工程师林咏华表示，数据决定了大模型的智力边界，已有的中文语言大模型采用的开源数据大多来自海外开源数据集。国际数据集中的中文内容占比较少，基于这些语料库训练的大模型始终是“英文思维”。建设高质量中文语料库能够从本源上解决大模型数据安全问题，保障我国大模型产业健康发展。
林咏华称，现阶段高质量语料库工作完成了第一阶段中文互联网语料库建设。第二阶段将建设综合数据集，联合建设大规模高质量文本、语音、图像、视频和多模态数据集，用于训练数据、合规性检测等方面；第三阶段将建设行业数据集，面向大模型行业应用需求，汇聚形成自动驾驶、医学文本和影像、计算机代码、网络安全等数据资源库，把生成式人工智能技术转化为生产力，支持重点行业智能化升级。
下一篇：“澳科一号”正式投入使用
相关内容
热门资讯
游戏指南！牛牛房卡哪里有最低价...
PDceU苹果的秋季新品发布会已经定档于北京时间的9月13日。这次发布会上“官宣"的产品中，不仅有热...
游戏！牛牛房卡房间怎么开，微信...
zEe3Pi6因此整个手机看起来非常的好看。在参数方面，据悉该机采用了5000万像素大底主摄+320...
游戏！牛牛房卡批发平台，牛牛科...
05tiPhone13内置3095mAh电池，支持20W有线+15W无线，别看电池容量比任何一款安卓...
游戏知识！牛牛房卡哪里买便宜，...
4PRQ最核心的处理器，其实真没必要多讲，iPhone13搭载A15芯片，尽管是“阉割版”，但依旧是...
游戏测评！正版金花房卡批发，微...
RsMIM其实，苹果之所以能走到今天，就是因为它的技术和创新能力，除了系统和芯片之外，细节方面也在逐...
游戏指南！牛牛房卡批发价，斗牛...
D6uFQ从外观屏幕来看，这款OPPO Reno10新机采用了一块6.79英寸的三星AMOLED曲面...
评测！100元300张房卡，牛...
QkPRTFU从核心配置来看，这款OPPO Reno9手机搭载了高通骁龙778G处理器，采用了更先进...
游戏知识！金花房卡价格表，金花...
Rwnd0iPhone 15系列的电池容量会更大吗？ 随着 iPhone 13系列的推出， iPho...
游戏知识！战神牛牛房卡批发价，...
7coY可靠的泄密者ShrimpApplePro分享到 Twitter 的图像和视频展示了一张之前未...
游戏介绍！微信金花房卡充值，大...
9PUyP关键是苹果手机一直都有着战三年的称号，再加上iOS系统也在逐渐变得给力，也就会导致产品本身...
评测！怎么在微信上玩斗牛，牛牛...
Kxy.延续了几代的刘海屏也将会被抛弃，采用了全新的“感叹号”屏。以前一直觉得iPhone产品的刘海...
游戏！正规房卡链接在哪购买，牛...
VN因此手机正面的视觉效果相当的不错。并且，realme GT Neo5采用了一块1.5K屏幕，同时...
游戏知识！牛牛房卡批发价格，牛...
L不管怎么进行调整，应该都要比iPhone13标准版的性能更强，不然也就很难让用户产生换机的欲望了，...
游戏牛牛房卡哪里有卖的，微信金...
fY1ugj1.顶级的A16仿生芯片将运用到iPhone 14系列上。苹果A16芯片采用先进的4nm...
游戏牛牛充值房卡，牛牛房卡房间...
Fk0kOkfx3.全系电池大提升，其中标准版iPhone 14版本电池容量将会扩充为3228mAh...
游戏介绍！牛牛房卡多少钱，游戏...
cla5undK3.全系电池大提升，其中标准版iPhone 14版本电池容量将会扩充为3228mAh...
游戏介绍！大厅房卡哪里有卖，游...
MWsA63关于iPhone 14系列新机的其他配置信息，这里也简单介绍一下。iPhone 14系列...
游戏指南！正版房卡批发，正版游...
M7在核心硬件方面，据悉这款摩托罗拉X50mini采用了高通骁龙7+ Gen2移动平台，高通骁龙7+...
游戏知识！金花房卡哪里有的卖，...
kI0rWoqm除了屏幕和后置相机的变化之外，iPhone16Pro还将会支持手写笔的使用，所以后续...
游戏知识！牛牛房卡批发价格，金...
u尽管iPhone14大概率会在今年9月某一天发布，但配置相对iPhone13而言，可以说是小幅升级...