苹果连发3项AI研究,推进空间计算与Vision Pro头显方向
创始人
2026-05-12 15:40:34

IT之家 5 月 12 日消息,科技媒体 Appleinsider 昨日(5 月 11 日)发布博文,报道称基于最新公开的 3 项研究,苹果仍在积极推进空间计算和 Vision Pro 头显。

IT之家 4 月援引 MacRumors 媒体报道,苹果公司内部已搁置研发新款 Vision Pro,团队重心转向 Siri 和 AI 智能眼镜。

但从最新公示的研究论文来看,苹果公司并未放弃 Vision Pro 头显项目,本轮公开了 3 项研究,分别涉及多模态大模型空间推理评测、美式手语视频标注,以及 3D 头部重建。

其中最直接的一项,是苹果在机器学习博客发布的《From Where Things Are to What They’re For:Benchmarking Spatial-Functional Intelligence for Multimodal LLMs》。

这篇论文提出 SFI-Bench,用来测试多模态大模型是否既看懂空间布局,也理解物体“能做什么”。原文提到,这套视频基准包含 134 段室内视频扫描,并整理出 1555 道专家标注问题。

SFI-Bench 不只问模型“这是什么、在哪里”,还会追问“它怎么用、出了故障怎么办”。例如,模型可能需要从柜子里找出同品牌数量最多的一组瓶子,理解洗衣机当前程序如何取消,或者判断电视遥控器的用途。相比只测空间识别的旧方法,这更接近日常家庭场景,也更像未来空间助手需要处理的真实任务。

苹果公司的人工智能研究人员测试了智能体(LLM)对周围世界的理解能力。图源:苹果公司

测试结果显示,Google Gemini 3.1 Pro 总分最高,OpenAI GPT-5.4-High 排名第二,Gemini-3.1-Flash-Lite 排名第三。

但论文也点出共同短板:几乎所有模型都不擅长“带条件的全局计数”,并且在空间记忆、功能知识整合,以及把眼前画面和外部知识连起来这几件事上仍有明显限制。

手语论文《Bootstrapping Sign Language Annotations with Sign Language Models》尝试用 AI 自动生成候选标注,减少数百小时手工标注成本。

苹果公司的研究人员探索了使用人工智能进行美国手语(ASL)标注的可能性。图源:苹果公司

原文称,团队建立了近 500 条人工英文字词到术语标注,并扩展到超过 300 小时 ASL STEM Wiki 和 7.5 小时 FLEURS-ASL 数据。其手指拼写模型在 FSBoard 上达到 6.7% CER,在 ASL Citizen 数据集上达到 74% top-1 准确率。

第三项研究《Large-Scale High-Quality 3D Gaussian Head Reconstruction from Multi-View Captures》则聚焦 3D 头像重建。

苹果公司的人工智能研究人员探索了如何利用 LLM(层级建模)技术,从多角度拍摄的图像中创建 3D 头部模型。图源:苹果公司。

苹果提出 HeadsUp 方法,可从大规模多摄像头采集中重建高质量 3D Gaussian 头部模型。测试使用了一个超过 10000 名受试者的内部数据集,规模比现有多视角人头数据集高一个数量级。这可能和 Vision Pro 的 Persona,或 visionOS 中更自然的人脸捕捉与表情渲染有关。

苹果公司全球营销高级副总裁格雷格 · 乔斯维亚克(Greg Joswiak)此前表示,Vision Pro 展示了数字世界与物理世界融合的未来形态,这种融合具有必然性。当被问及具体时间表时,他坦言无法预测“空间计算”何时能成为主流,但坚信这一方向不可逆转。

参考

相关内容

热门资讯

2026年“中学生英才计划”山... 8月21日至23日,为期三天的“中学生英才计划”山西省线下交流活动在太原举办。吕梁一中、汾阳中学、临...
原创 V... 2026VCTCN第二赛段的总决赛已经过去两天了,或许很多粉丝都还没有缓过神来,谁也没想到今年走到最...
合肥加码词元经济基建 国产算力... 来源:证券时报网 8月20日,在“智算合肥 生态领航”词元经济生态大会上,全栈国产的合肥智算集群正式...
原创 体... 大家好我是指尖,25日体验服迎来了一轮更新,对几个英雄进行了平衡性的调整,蒙犽终于有了新的消息,一起...
“转人工客服”岂能成闯关游戏丨... 如今,消费者想找到人工客服成了件难事。据中消协介绍,今年上半年受理的消费者投诉中,对人工智能(AI)...