阿里巴巴公布图生视频专利
创始人
2025-02-07 19:22:23

来源:壹度Pro

可实现智能化端到端图生视频

天眼查知识产权信息显示,近日,阿里巴巴(中国)有限公司申请的“一种图生视频方法和装置”专利公布。

摘要显示,本发明实施例将包含目标对象的源图像输入第一视频生成模型得到素材视频,根据素材视频确定帧间变换矩阵序列,然后从源图像中得到目标对象对应的对象掩码图像,将帧间变换矩阵序列应用于对象掩码图像可得到多张掩码图像从而组成掩码图像序列,将帧间变换矩阵序列应用于源图像可得到多张目标对象图像从而组成目标对象图像序列,根据源图像、掩码图像序列和目标对象图像序列确定目标输入数据,将目标输入数据输入支持局部重绘的第二视频生成模型,得到对应的目标视频。通过两次模型生成视频,实现了智能化端到端的图生视频,无需引入预设运动参数即可在保持目标对象不扩散的同时,实现运动轨迹多样性。

相关内容

热门资讯

方斌:让机器人指尖如人手,可感... 【“科协十一大”精神学习进行时】 近日,国家科学技术奖励大会、两院院士大会、中国科协第十一次全国代表...
财经深一度|当AI帮人决策“买... 新华社北京8月28日电题:当AI帮人决策“买单”,如何筑牢支付安全底线 新华社记者吴雨 “帮我订张机...
台风“沙德尔”过后农业复产指南... 今年第18号台风“沙德尔”(台风级)的中心已于今天(28日)8时05分前后在浙江台州玉环市坎门街道沿...
IG零封TT晋级,女明星都来给... LPL骑士之路精彩赛事依旧在火热进行中,今天的两场骑士之路对决都结束了,像是约好了一样,结果都是相同...
欧洲给AI数据中心配电源,中国... AI数据中心的电力焦虑,正在欧洲催生一种过去并不存在的产业政策。 8月25日,西班牙政府公布了一份新...