创新工场CMO发文回应Yi大模型“抄袭LLaMA”事件
金融界
2023-11-15 17:27:04

原标题:创新工场CMO发文回应Yi大模型“抄袭LLaMA”事件

创新工场CMO发朋友圈回应Yi大模型“抄袭LLaMA”事件,她表示零一万物发布Yi-34B模型训练的说明,回应对于模型架构的探讨舆论。

创新工场CMO发文表示,沿用行业演进渐成通用、生态拥抱的基础架构就成了“套模、山寨“?(就像手机app开发者都得益于ios、Android的共通架构)。零一万物会持续从社区中虚心学习,持续进步。

根据说明内容显示,零一万物从零开始训练了Yi-34B和Yi-6B模型,并根据实际的训练框架重新实现了训练代码,用自建的数据管线构建了高质量配比的训练数据集(从3PB原始数据精选到3T token高质量数据)。

在零一万物初次开源过程中,我们发现用和开源社区普遍使用的LLaMA 架构会对开发者更为友好,对于沿用LLaMA部分推理代码经实验更名后的疏忽,原始出发点是为了充分测试模型,并非刻意隐瞒来源。零一万物对此提出说明,并表达诚挚的歉意,我们正在各开源平台重新提交模型及代码并补充LLaMA 协议副本的流程中,承诺尽速完成各开源社区的版本更新。

来源:凤凰网科技

相关内容

热门资讯

6500mAh续航灭霸+三星护... GT7Pro的电池与系统优化像是两只同频的齿轮,彼此协作,给你一个相对从容的日常体验。它不是靠折中妥...
12GB+2TB+可拆卸电池,... 温馨提示: 最近来了很多新同学, 蓝字」, 右上角「···」, 将奇果酱「」, 以免错过重要消息哦~...
AI识别+机器人处理!全国二十... 发现车辆违停及时响应、小区老人摔倒迅速发出警报、机器人快速清扫刚落地的垃圾......在商业写字楼、...
诸城市深化信用信息应用夯实信用... 近年来,诸城市坚持数据为基、应用为本,大力推进各类信用信息归集共享应用,推动信用体系建设再上新台阶。...
中海油服“璇玑”高速脉冲器在印... 记者12月12日自中海油服获悉,公司自主研发的“璇玑”高速率脉冲器(HSVP)于12月2日顺利完成在...