• 谷歌的 Lumiere 利用 STUNet 技术重新定义了 AI 视频生成，比传统方法更接近现实。
  • Lumiere展示了卓越的性能和潜力，挑战现有的 AI 视频生成器，同时谷歌也重视防止技术滥用的责任。

谷歌揭开了其在 AI 视频生成方面的最新突破，推出了名为 Lumiere 的新模型。这项尖端技术利用一种名为时空 U-Net（STUNet）的扩散模型，创建前所未有的接近现实的视频。

技术解析

与传统方法拼凑生成的关键帧不同，Lumiere 采用了不同的方法：先创建一个基础帧，然后利用 STUNet 估算帧内物体的运动。这一过程无缝生成更多帧，这些帧流畅衔接，形成逼真的动态效果。相比之下，Lumiere 能生成惊人的 80 帧，而其他模型如 Stable Video Diffusion 只能生成 25 帧。

挑战竞争对手

与 Runway 和 Meta 的Emu等竞品相比，Lumiere 展示了更优越的性能，使谷歌成为 AI 视频生成领域的强大参与者。与流行的 Runway 平台使用相同提示词的对比显示，Lumiere 能够完美地动画化现实场景，超出了预期，并推动了 AI 视频生成逼真度的界限。

另请阅读：中国的互联网法院是什么？AI 法官与区块链证据

拓展可能性

谷歌对 AI 的推进不止于文本转视频生成。Lumiere 将提供额外功能，包括图像转视频生成、风格化生成、动态静图和画面修复。这些增强功能允许用户创建特定风格的视频、动画化素材的选定部分，以及改变视频中的颜色或图案。

担忧与责任

然而，谷歌承认这项强大技术可能被滥用。在其发表的论文中，该公司强调了开发工具来检测偏见和防止恶意使用的重要性。确保一个安全和公平的使用环境仍然是谷歌的首要任务，尽管没有明确说明实现这一目标的具体方法。

随着 Lumiere 的不断发展和成熟，它展示了谷歌在 AI 视频生成领域推动创新的承诺。凭借其卓越的性能和广阔的前景，Lumiere 必将挑战现有的 AI 视频生成器，并为逼真视频创作的新时代铺平道路。Lumiere 标志着向逼真 AI 视频生成之旅迈出了重大一步。