立即下载
谷歌浏览器

正版谷歌浏览器 Google打造

隐私模式 多标签运行

立即下载

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

来源:谷歌浏览器2024-01-29

谷歌浏览器电脑版

谷歌浏览器电脑版

硬件:Windows系统 版本:122.0.6261.6 大小:66.69MB 软件语言:简体中文
厂商:谷歌信息技术(中国)有限公司 发布:2022-07-08 更新:2024-03-26 软件评级:
立即下载
详情介绍

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频。谷歌推出的AI扩散模型Lumiere将为我们打开全新的视觉世界。它让我们能够通过文字来创造和表达丰富多样的动作视频,从而改变我们与视频内容的互动方式。随着技术的不断进步和应用场景的拓展,我们期待看到更多由Lumiere模型带来的创意和惊喜。

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

谷歌表示,业界绝大多数“文生视频”模型无法生成时间长、质量佳、动作连贯逼真的内容,这是因为此类模型通常“分段生成视频”,首先产生几张关键帧,接着用“时间超级分辨率(Temporal Super-Resolution)”技术,生成关键帧之间的视频文件,这种方法虽然能够节省 RAM,但难以生成“连贯逼真”的视频。

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

谷歌提到,他们的新模型 Lumiere 相对于业界模型最大的不同是采用了全新“Space-Time U-Net”基础架构,该架构能够在空间和时间上同时“降采样(Downsample)”信号,从而在“更紧凑的时空中进行更多运算”,令 Lumiere 生成持续时间更长、动作更连贯的视频。

本站注意到,Lumiere 一次可以生成 80 帧视频(16FPS 下 5 秒视频 / 24FPS 下约 3.34 秒视频),虽然这一数据看起来很短,不过研究人员提到,5 秒视频长度实际上“已经超过大多数媒体作品中的平均镜头时长”。

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

除了应用“Space-Time U-Net”基础架构外,谷歌还介绍了 Lumiere 的基础特性,该 AI 建立在一个经过预先训练的“文生图”模型基础上,研究人员首先让基础模型生成视频分帧的基本像素草稿,接着通过空间超分辨率(SSR)模型,逐步提升分帧分辨率及细节,并利用“Multidiffusion”通用生成框架提升模型稳定性,从而保证了最终输出的视频一致性和连续性。

谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频

上述就是浏览器之家分享的【谷歌推出最新AI扩散模型Lumiere:可将文字转化为连贯的动作视频】全部内容,感谢大家的关注和阅读!

继续阅读
本篇文章给大家详细介绍谷歌浏览器开启多窗口模式的方法步骤,感兴趣的朋友快来看看了解一下吧。 2024-07-10 谷歌浏览器如何解决自动跳转问题?本篇文章给大家带来解决谷歌浏览器自动跳转问题详细方法,有需要的朋友快来看看吧。 2024-07-05 本篇文章给大家详细介绍谷歌浏览器设置网页不显示图片的具体操作方法,有需要的朋友赶紧来具体了解一下吧。 2024-07-01 谷歌浏览器访客模式怎么打开?本篇文章给大家带来谷歌浏览器开启访客模式教程介绍,有需要的朋友千万不要错过了。 2024-06-25 谷歌浏览器网速慢如何解决?本篇文章给大家带来快速解决谷歌浏览器网速慢问题方法教程,希望能够给大家带来帮助。 2024-06-18 chrome浏览器如何滚动截图?下面就让小编给大家带来chrome浏览器滚动截图操作技巧,希望能够给大家带来帮助。 2024-06-14 谷歌浏览器进行录音怎么设置?接下来小编给大家带来谷歌浏览器进行录音设置操作方法,有需要录音操作的朋友赶紧来学习一下吧。 2024-06-03 谷歌浏览器怎么加速网页浏览?接下来小编就给大家带来谷歌浏览器提升网页加载速度教程一览,大家赶紧来看看吧。 2024-05-21 谷歌浏览器怎么使用安全DNS功能?下面小编就给大家带来谷歌浏览器开启安全DNS功能技巧详解,希望能够给大家带来帮助。 2024-05-17 谷歌浏览器怎么自定义安装路径?本篇文章就给大家带来自定义谷歌浏览器安装路径教程详解,有需要的朋友不妨来看看了解一下。 2024-05-05
相关文章
返回顶部