云从科技从容大模型在benchmark COCO上刷新世界纪录 大幅降低AI应用成本
云从科技
2023-10-19 10:43:08

原标题:云从科技从容大模型在benchmark COCO上刷新世界纪录 大幅降低AI应用成本

近日,云从科技从容大模型在视觉领域再次取得重要进展,基于视觉基础大模型的目标检测器在检测领域著名benchmark COCO数据集上从微软研究院(MSR)、上海人工智能实验室、智源人工智能研究院等多家知名企业与研究机构脱颖而出,刷新了世界纪录。

云从科技从容大模型在COCO测试集上平均精度(以下简称mAP,mean Average Precision)达到0.662,位列榜单第一(见下图)。在验证集上,单尺度取得mAP 0.656的佳绩,多尺度TTA后mAP达到0.662,均达到世界领先水平。

大数据结合自监督学习 打造视觉核心技术

以GPT为代表的大数据自监督预训练已经在自然语言理解(NLP)领域取得了令人瞩目的突破,视觉领域方面,大数据结合自监督学习的基础模型训练也有重要进展。

一方面,广泛的视觉数据有助于模型学习通用的基础特征。云从视觉基础大模型,使用了超过20亿的数据,包括大量无标签数据集以及图文多模态数据集,数据集的丰富多样使得模型能够提取到稳健的特征,大大降低了下游任务的开发成本。

另一方面,自监督学习不需要人工标注,使得海量的无标注数据训练视觉模型成为可能。云从对自监督学习算法进行了多方面的改进,使其能更适用于检测、分割等细粒度任务,在COCO检测任务上取得好成绩就是证明。

开放目标检测+零次学习检测能力 大幅降低研发成本

得益于视觉基础模型优异性能,云从从容大模型能够基于大规模图文多模态数据训练支持上千类别目标的零次学习(以下简称zero-shot)检测,涵盖能源、交通、制造等行业的各类目标。

从容大模型zero-shot能力在不同数据集上的表现

zero-shot能够模仿人类的这个推理过程,利用过去的知识,在计算机中推理出新对象的具体形态,从而使得计算机具有识别新事物的能力。

如何理解zero-shot?假设我们已知驴子和马的形态特征,又已知老虎和鬣狗都是有条纹的动物,熊猫和企鹅是黑白相间的动物,我们定义斑马是黑白条纹相间的马科动物。不看任何斑马的照片,仅仅凭借推理,在动物园一众动物中,我们也能够找到斑马。

云从视觉基础大模型表现出很强的泛化性能,大大降低了下游任务所需的数据依赖与开发成本,同时zero-shot大幅提高了训练开发效率,使得广泛应用和快速部署成为可能。

相关内容

热门资讯

关注|面临四大瓶颈,谁能在柔性... 来源:阳光高考信息平台 从柔性存算芯片到超薄弹性介电材料,从“能感知”到“能思考”,柔性电子正在经历...
反常识的爆款:一亿注册、千万D... 一个月前,《无畏契约:源能行动》(业内及玩家习惯称之为“手瓦”)抛出一枚重磅数据:用户注册量正式突破...
手瓦一周年复盘:曾担心生不逢时... 一个月前,《无畏契约:源能行动》发了条公告:注册用户破亿了。往前推几个月,今年5月他们还公布过一个数...
重庆电力上线调控核心业务AI智... 8月25日,国网重庆江津供电公司调控中心调度班班长刘嫣然,在研发投运的“调控核心业务智能查询与辅助管...
苹果最强Mac杀到!全新Mac... 快科技8月25日消息,今日,苹果全新Mac Studio发布,可选M5 Max与全新M5 Ultra...