腾讯联合清华、港科大推出图生视频大模型,能让图动起来
数智前线
2024-03-15 18:48:22

原标题:腾讯联合清华、港科大推出图生视频大模型,能让图动起来

3月15日,腾讯和清华大学、香港科技大学联合推出全新图生视频模型“Follow-Your-Click“,基于输入模型的图片,只需点击对应区域,加上少量提示词,就可以让图片中原本静态的区域动起来。

当前的图生视频大模型中,一般的生成方法不仅需要用户在提示词中描述运动区域,还需要提供运动指令的详细描述,过程较为复杂。另外,从生成的效果来看,现有图像生成视频技术在移动图像的指定部分上缺乏控制,生成的视频往往需要移动整个场景,而不是图像上的某一个区域,精准度和灵活性上有所欠缺。

为了解决这些问题,腾讯混元大模型团队、清华和港科大的联合项目组提出了更实用和可控的图像到视频生成模型Follow-Your-Click,带来更加便捷的交互,也让图片“一键点,万物动”成为现实。

据了解,本联合项目组中的腾讯混元大模型团队,正在持续研究和探索多模态技术,拥有行业领先的视频生成能力。此前,腾讯混元大模型作为技术合作伙伴,支持《人民日报》打造原创视频《江山如此多娇》,生成中国大美河山的精美视频片段,展示出了较强的内容理解、逻辑推理和画面生成能力。

相关内容

热门资讯

消息称富士X-T6相机电池容量... IT之家 6 月 21 日消息,综合消息源 @E8M_8888 及外媒 FujiRumors,富士 ...
温州匠工法兰管件取得波纹钢管连... 国家知识产权局信息显示,温州匠工法兰管件有限公司取得一项名为“一种波纹钢管连接结构”的专利,授权公告...
原创 国... 作为王者荣耀热门的射手英雄之一,虞姬已经有了四款传说皮肤和一款典藏,这个规格不能说十分顶尖,但已经超...
原创 游... 游戏主播工资全部上交,却被不上班的妻子嫌弃,直播时用水泼坏设备,DOTA2直播圈从来不缺少“节目效果...