今年初,OpenAI 推出的生成式 AI 视频技术 Sora 震撼了市场,但其服务并未对大众开放,这激发了其他公司推出类似技术产品的动力,比如快手的可灵AI、智谱的清影等。来自旧金山的Luma AI公司也推出类似的服务——Dream Machine。Luma AI成立于2021年,由柏克莱大学的AI研究人员Alex Yu和前苹果Vision Pro开发人员Amit Jain联合创办。

Dream Machine技术特点
Dream Machine 允许用户通过自然语言描述生成逼真的视频。Luma AI 声称,该服务能在 2 分钟内生成每秒 120 帧的 5 秒高画质短片。根据官方说明,Dream Machine 基于直接训练视频的高效 Transformer 模型,能够制作出精准且一致的精致场景(官方说明)。

如何使用 Dream Machine?
1. 免费注册帐号
首先需要注册一个 Luma AI 帐号,注册过程简单,只需通过谷歌账号登录绑定即可免费注册。

2. 输入提示词
接着可以输入文字描述来生成 AI 视频内容,包括场景、人物、动作等。目前测试显示,中文和英文均可使用。也可以勾选「Enhance prompt」提示词来优化描述,但如果要防止输出结果偏离原意,不建议勾选。

3. 开始生成视频
Luma AI 会根据文字描述的内容,开始运算自动生成 5 秒的短片,整个过程大概需要几分钟。目前 Luma AI 在文字生成视频方面的表现还有待提高,有时会出现视频模糊、变形或解析度品质过低的情况。

4.照片生成 AI 视频方法
通过 Luma AI 测试用照片生成 AI 视频,发现这是 Luma Dream Machine 模型的强项,能将一张平面照片直接转换成动态视频效果,效果优于直接通过提示词生成的视频。直接在输入指令框内上传图片,并可搭配辅助文字提示词,Luma AI 就会依据照片中的人物或场景自动生成更多动态视频画面。

结语
Luma AI 目前对免费用户提供每月 30 个视频生成额度,即每月可生成 30 个 5 秒钟的短视频。如果需要生成更多视频,则需要付费订阅。从目前 Luma AI 的发展趋势来看,未来每个人都将能够直接使用 AI 来制作视频,以最低成本制作动画、电影或短片将不再是梦。
