文章来源:08AI导航网发布时间:2025-03-18 16:13:51
3 月 7 日消息,阿里巴巴研究团队近日推出了 AtomoVideo 高保真图生视频(I2V,Image to Video)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。
3 月 7 日消息,阿里巴巴研究团队近日推出了 AtomoVideo 高保真图生视频(I2V,Image to Video)框架,旨在从静态图像生成高质量的视频内容,并与各种文生图(T2I)模型兼容。
总结 AtomoVideo 特性如下:
高保真度:生成的视频与输入图像在细节与风格上保持高度一致性
运动一致性:视频动作流畅,确保时间上的一致性,不会出现突兀的跳转
视频帧预测:通过迭代预测后续帧的方式,支持长视频序列的生成
兼容性:与现有的多种文生图(T2I)模型兼容
高语义可控性:能够根据用户的特定需求生成定制化的视频内容
▲图源 AtomoVIdeo团队论文
AtomoVideo 使用预先训练好的 T2I 模型为基础,在每个空间卷积层和注意力层之后新添加一维时空卷积和注意力模块,T2I 模型参数固定,只训练添加的时空层。由于输入的串联图像信息仅由 VAE 编码,代表的是低层次信息,有助于增强视频相对于输入图像的保真度。同时,团队还以 Cross-Attention 的形式注入高级图像语义,以实现更高的图像语义可控性。
目前,该团队只发布了 AtomoVideo 的论文及演示视频,并未提供在线体验地址。同时官方开设了 GitHub 账户,但仅用作官方网站托管,并未上传任何相关代码。
相关攻略 更多
阿里巴巴推出 AtomoVideo 高保真图生视频框架,兼容多种文生图模型
“零一万物”宣布开源Yi-9B模型,号称同系列内代码、数学能力最强,能在消费级显卡上轻松部署
Stable Diffusion 3技术报告公开:基于Sora生成构架,开源图像模型有望超越Midjourney、DALL·E等闭源模型
马斯克与奥特曼「八年的爱恨情仇」:从兄弟联手创办OpenAI,到理念不合、分道扬镳、相爱相杀、对薄公堂
OpenAI完成奥特曼被罢免内部调查丨Midjourney将Stability AI拉黑丨马斯克:OpenAI更名CloseAI就撤诉
英伟达推出“生成式AI专业认证”,帮你成为大模型开发专家!
谷歌Gemini新功能上线:可针对回复进行重新生成、缩短文段、扩充指定的聊天内容
GPT-4王冠没掉!Claude 3竞技场人类投票成绩出炉:仅居第三
最新资讯 更多
阿里巴巴推出 AtomoVideo 高保真图生视频框架,兼容多种文生图模型
更新时间:2025-03-18
“零一万物”宣布开源Yi-9B模型,号称同系列内代码、数学能力最强,能在消费级显卡上轻松部署
更新时间:2025-03-18
Stable Diffusion 3技术报告公开:基于Sora生成构架,开源图像模型有望超越Midjourney、DALL·E等闭源模型
更新时间:2025-03-18
马斯克与奥特曼「八年的爱恨情仇」:从兄弟联手创办OpenAI,到理念不合、分道扬镳、相爱相杀、对薄公堂
更新时间:2025-03-18
OpenAI完成奥特曼被罢免内部调查丨Midjourney将Stability AI拉黑丨马斯克:OpenAI更名CloseAI就撤诉
更新时间:2025-03-18
英伟达推出“生成式AI专业认证”,帮你成为大模型开发专家!
更新时间:2025-03-18
谷歌Gemini新功能上线:可针对回复进行重新生成、缩短文段、扩充指定的聊天内容
更新时间:2025-03-18
GPT-4王冠没掉!Claude 3竞技场人类投票成绩出炉:仅居第三
更新时间:2025-03-18
硅谷版“罗密欧与朱丽叶”:马斯克vs奥特曼的爱恨情仇丨从兄弟同心到对薄公堂,8年发生了什么?
更新时间:2025-03-18
跟人类学孬了!联合国:AI大模型的回复存在严重的性别偏见、种族偏见与刻板印象等问题
更新时间:2025-03-18