最近，Adobe 发布了一款全新的创意工具–Adobe Firefly 视频模型。 这一创新工具标志着 Adobe 在现有 Firefly 生成式人工智能图像模型的基础上，大胆涉足人工智能生成视频领域。

Adobe 表示，该模型是经过道德训练的，使用的数据都是该公司拥有或允许使用的，确保了生成内容的安全性。 不过，Adobe Stock 上的一些创作者表示了异议，他们认为自己上传的作品并不是用来训练人工智能模型的，甚至有可能与自己的风格形成竞争。

Adobe Firefly Video Model 预计将于今年晚些时候进入测试阶段，该公司已经开放了早期访问的候选名单，感兴趣的人可以申请。 在功能方面，它不仅支持文本到视频和图像到视频的转换，还支持视频编辑功能，不过每个生成的片段最长不超过 5 秒。

高质量视频生成示例

Adobe 的官方博客展示了一些早期生成的视频示例，令人印象深刻，这些视频内容质量上乘，而且高度遵循文本提示。 使用 Firefly 文本到视频，可以生成无缝的 B-Roll，通过文本提示、各种摄像机控制和参考图像来填补时间轴上的空白。

对于企业决策者来说，Adobe 的萤火虫视频模式可能是一个极具吸引力的选择，尤其是对于那些希望制作视频用于员工培训或营销的公司来说。 Adobe 还提供法律保证，即使在使用其人工智能模型时也能免受侵权诉讼，但目前尚不清楚这是否包括萤火虫视频模式。

自 2023 年 3 月推出以来，Adobe 已将 Firefly 模型集成到其广泛使用的 Creative Cloud 软件套件中，作为新人工智能功能的基石。 Firefly 工具已嵌入 Photoshop、Illustrator 和 Lightroom 等流行应用中，为用户提供了生成填充、生成移除和文本到模板等功能。

据 Adobe 称，自推出以来，使用 Firefly 生成的图像和矢量已超过 12 亿张，使其成为公司采用速度最快的创新技术之一。 领导该项目的 Adobe 高管 Ashley Still 表示，公司 “正与视频编辑社区密切合作，推进 Firefly 视频模型的发展”。

不仅支持人工智能视频生成

此外，Firefly 视频模型不仅可以生成新视频，还包括人工智能编辑功能，如删除不需要的元素和完美过渡。 随着短视频内容的增加和制作时间的压缩，Adobe 希望这些工具可以帮助编辑人员加快工作流程，同时保持高质量的输出。

Adobe 的 Firefly 视频模型提供的工具不仅可以帮助剪辑师剪辑素材，还可以管理色彩校正、动画、视觉效果等。 该模型还支持多种创意效果，包括生成 b-roll、微距镜头和大气元素（如火、烟雾或水），用户可以将这些效果叠加到预先录制或动画的素材上。

今年晚些时候将在 Premiere Pro 中推出的一项突出功能是 “生成扩展”（Generative Extend）。 该功能将允许剪辑师扩展视频片段，填补片段中的空白或平滑过渡，帮助片段与音频和其他视觉元素的节奏相匹配。 Adobe 演示了 "生成扩展 "如何延长一个镜头的持续时间，使其与音乐的高潮部分完全一致：

Adobe 还在探索如何将人工智能整合到更多创意工作流程中，希望这些新工具能帮助创作者有更多时间探索创意，从而提高项目的整体质量。

官方博客：https://blog.adobe.com/en/publish/2024/09/11/bringing-gen-ai-to-video-adobe-firefly-video-model-coming-soon

尽管清华的 Vidu 和快手的可灵文生视频大模型的确不错，但是就像李开复教授所说中美之间的 AI 技术仍存在不小的差距，国内应该鼓励更多的应用落地。

感谢大家花时间阅读我的文章，你们的支持是我不断前进的动力。期望未来能为大家带来更多有价值的内容，请多多关注我的动态！