一图一音频即可生成视频，字节跳动最新数字人模型将上线
创始人
2025-02-09 09:42:24
0次
2月7日，记者从字节跳动获悉，该公司采用的全新多模态视频生成模型OmniHuman即将上线即梦AI平台。据了解，用户仅需输入一张图片和一段音频，就可以生成一条生动的AI视频，这意味着AI短片的制作效率和质量有望得到大幅提升。
据介绍，视频生成模型OmniHuman为字节跳动自研的闭源模型，可支持肖像、半身以及全身等不同尺寸的图片输入，并可根据输入的音频，在视频中让人物生成与之匹配的动作，包括演讲、唱歌、乐器演奏以及移动。
尤其是，对于人物视频生成中常见的手势崩坏，该模型相比现有方法取得了显著的改善。此外，业内认为，该模型对动漫、3D卡通等非真人图片输入的支持效果也较为出色，生成的视频能保持特定风格和原有的运动模式。
图片来自即梦AI视频号内容截图
记者根据技术主页展示的演示效果来看，OmniHuman的生成效果已经具有较高的自然度。同时，为防止该项技术被不当利用，字节跳动技术团队在主页中特别标注称，OmniHuman将不会对外提供下载。
“该模型目前已具备较好的表现，但在生成影视真实级别的视频上仍存在一定的提升空间。”即梦AI相关负责人透露，由其支持的多模态视频生成功能会在即梦上以小范围内测的形式进行调优调整，并逐步开放。该负责人同时表示，即梦还会对这一功能设置严格的安全审核机制，并且对输出的视频标注水印以作提醒，从而确保AI发挥正面、积极的作用，助力视频创作者更好地实现想象力的表达。
来源：北京日报客户端
记者：鹿杨
相关内容
热门资讯
游戏指南！游戏大厅房卡代理，金...
Z其实，苹果之所以能走到今天，就是因为它的技术和创新能力，除了系统和芯片之外，细节方面也在逐渐进行完...
PassMark 测试 20 ...
IT之家 2 月 12 日消息，基准测试软件开发商 PassMark 每两周发布全球所有 Windo...
安卓云手机：哪个云手机既便宜好...
在如今的移动设备市场中，云手机成为了越来越多用户的选择。它不仅为用户提供了便捷的移动办公和娱乐方式，...
游戏牛牛房卡在哪里买便宜，微信...
OVzCv39f尽管目前距离 iPhone 15 系列的亮相还有很长一段时间，但按照以往的惯例，该系...
游戏战神牛牛房卡批发价，微信房...
0Pg73这也就表明，iPhone 15 Pro Max的屏占比更高了，这也是一个好的升级点。该推特...
游戏知识！微信金花房卡怎么弄，...
AeiiPhone 14 Pro正面采用了居中感叹号形挖孔，内置True Depth摄像头模块，拥有...
全力攻坚 完成行业少见的“97...
2月10日，工程师张玉西（右一）正和同事进行讨论。本版图片除署名外均由受访者供图 “昨天...
DeepSeek的出现是意料之...
来源：新浪科技 新浪科技讯 2月11日下午消息，在阿联酋迪拜举办的World Governments...
游戏微信房卡链接神兽大厅，牛牛...
Kvwd7K此次华为旗舰新品发布会不仅有三款华为P60系列旗舰，而且还有华为折叠屏新机华为Mate ...
游戏推荐微信房卡联系人，微信小...
sZia6使得该机的综合硬件配置可以说是达到了一个新高峰。如果上述曝光的这款realme GT3属实...
助力低空经济——大载重动力测试...
一、行业背景 随着低空经济的高速发展，无人机在物流运输、应急救援、农业植保、物资投送等领域的应用规模...
欧盟拟以“投资人工智能”倡议调...
新华社巴黎2月11日电（记者 丁英华 罗毓）欧盟委员会主席冯德莱恩11日在巴黎举行的人工智能行动峰会...
封禁不是终点，张兰们总有自己的...
花儿街参考 · 出品 作者 | 林默 1 就像你永远猜不到张兰的底线那样，你也永远想不到她生命力的...
微软新研究：过度依赖人工智能会...
IT之家 2 月 12 日消息，随着生成式人工智能技术的飞速发展，越来越多的人开始将 AI 工具融入...
游戏介绍！正规房卡链接在哪购买...
QN2hXVuE苹果公司计划在 iPhone 15系列中引入一种新的相机传感器，并将其命名为“Pro...
评测！微信房卡授权大厅链接平板...
Q6hIbNPG虽然距离传感器的位置改变，不过对于iPhone15系列手机来说灵动岛几乎没有变化，这...
英国和美国拒绝签署国际人工智能...
鞭牛士报道，2月11日消息，据BBC报道，英国和美国尚未在巴黎全球峰会上签署人工智能国际协议。 该声...
游戏指南！斗牛app批发价，金...
ZqP置上，据悉该系列中的 iPhone 15 与 iPhone 15 Plus 或将采用一块 60...
蛇年首发“开门红”
2月11日17时30分，我国在文昌航天发射场使用长征八号改运载火箭，成功将卫星互联网低轨02组卫星发...
游戏！斗牛游戏在哪里找，牛牛房...
VAXKRLRiPhone13内置3095mAh电池，支持20W有线+15W无线，别看电池容量比任何...