Sora模型的文生视频能力，想必一定惊艳过你。虽然Sora模型很惊艳，但是并没有开放给普通大众。Luma AI发布文生视频大模型Dream Machine模型，可以免费供大家使用，任何人只要到Luma AI的官方网站，就可体验Luma AI的文生视频魅力。

Luma 发布了 Dream Machine，这是一种人工智能模型，旨在根据文本指令和图像创建高质量、逼真且奇幻的视频。 Dream Machine 建立在可扩展、高效、多模式的 Transformer 架构之上，直接在视频上进行训练，使其能够生成物理上准确、一致且充满动作的场景。且任何人都可以直接在Luma上使用Dream Machine 建立自己的视频。

Dream Machine 是 Luma 前沿生成模型系列中的第一款产品，旨在通过图像、视频、文本和其他富有表现力的输入激发创造力。与之前的图像动画模型不同，Dream Machine 是一种真正的视频生成模型，速度和功能使其与众不同。Luma 致力于不断提高其效率，确保梦想家不受限制。

为了打造 Dream Machine，Luma 与 Amazon Web Services (AWS) 合作，并利用了其顶级 H100 训练基础设施 SageMaker HyperPod。该模型的早期反馈非常积极，反映了无数创意思维的解放。

进入Luma的网站，进入眼帘的便是使用Luma AI 生成的精美视频，从官方发布的视频来看，其质量还是相当的高的，无论是清晰度，连贯性都是很丝滑，而直接点击右上角的 try now 便可以尝试Dream Machine的文生视频的能力。就像官方介绍的一样，虽然Dream Machine是一个高质量的AI系统，但是luma 免费给大家使用。

Dream Machine支持文生视频与图片生成视频，用户可以直接输入一段文字，或者输入一张参考图片，Dream Machine将会根据文本描述的内容，生产一段精美的动态视频。

Dream Machine 是一款速度极快的视频生成器！ 120 秒内可以生成120 帧的视频。

针对图生视频，Dream Machine 生成具有逼真流畅的动作、电影摄影和戏剧效果的 5 秒镜头。让你的照片动起来，成为一个故事。

Dream Machine 了解人、动物和物体如何与物理世界互动。这可以创建具有出色的角色一致性和准确的物理特性的视频。

进入Dream Machine界面，只有一个大大的输入框，可以直接在输入框中，输入需要合成视频的文本，亦或者上传一张图片。输入文本后，等待几秒钟，就可以看到自己的视频了。

体验了一下，人工智能还是不会画手，也行是自己的提示词的问题，后续可以进行改进。

https://www.luma-ai.com/luma-dream-machine/
https://lumalabs.ai/dream-machine

更多transformer，VIT，swin tranformer
参考头条号：人工智能研究所
v号：启示AI科技

  动画详解transformer  在线教程