阿里巴巴公布图生视频专利
创始人
2025-02-07 19:22:23
来源：壹度Pro
可实现智能化端到端图生视频
天眼查知识产权信息显示，近日，阿里巴巴（中国）有限公司申请的“一种图生视频方法和装置”专利公布。
摘要显示，本发明实施例将包含目标对象的源图像输入第一视频生成模型得到素材视频，根据素材视频确定帧间变换矩阵序列，然后从源图像中得到目标对象对应的对象掩码图像，将帧间变换矩阵序列应用于对象掩码图像可得到多张掩码图像从而组成掩码图像序列，将帧间变换矩阵序列应用于源图像可得到多张目标对象图像从而组成目标对象图像序列，根据源图像、掩码图像序列和目标对象图像序列确定目标输入数据，将目标输入数据输入支持局部重绘的第二视频生成模型，得到对应的目标视频。通过两次模型生成视频，实现了智能化端到端的图生视频，无需引入预设运动参数即可在保持目标对象不扩散的同时，实现运动轨迹多样性。
相关内容
热门资讯
原创 全...
新的风口，藏在选择题里。 《盛世天下》6月30日宣布，《盛世天下》系列总销量现已超过 500 万套，...
原创 T...
TES被G2逆转击败，回到后台发生内讧，表现最好的小奶油爆发了，TES在本届MSI遭遇的失利，无疑成...
原创 这...
人们迫切想要观测的行业未来，可能又变得清晰了一点。 7月2日，茶馆君在武汉参与了一场线下的AI游戏...
小岛秀夫惋惜实体游戏光盘将消亡...
IT之家 7 月 6 日消息，游戏界最执着、最有远见的创作者之一小岛秀夫，近日在意大利一场活动上，为...