Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

工具6个月前发布 小马良
404 0

今年初,OpenAI 推出的生成式 AI 视频技术 Sora 震撼了市场,但其服务并未对大众开放,这激发了其他公司推出类似技术产品的动力,比如快手的可灵AI、智谱的清影等。来自旧金山的Luma AI公司也推出类似的服务——Dream Machine。Luma AI成立于2021年,由柏克莱大学的AI研究人员Alex Yu和前苹果Vision Pro开发人员Amit Jain联合创办。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

Dream Machine技术特点

Dream Machine 允许用户通过自然语言描述生成逼真的视频。Luma AI 声称,该服务能在 2 分钟内生成每秒 120 帧的 5 秒高画质短片。根据官方说明,Dream Machine 基于直接训练视频的高效 Transformer 模型,能够制作出精准且一致的精致场景官方说明)。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

如何使用 Dream Machine?

1. 免费注册帐号

首先需要注册一个 Luma AI 帐号,注册过程简单,只需通过谷歌账号登录绑定即可免费注册。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

2. 输入提示词

接着可以输入文字描述来生成 AI 视频内容,包括场景、人物、动作等。目前测试显示,中文和英文均可使用。也可以勾选「Enhance prompt」提示词来优化描述,但如果要防止输出结果偏离原意,不建议勾选。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

3. 开始生成视频

Luma AI 会根据文字描述的内容,开始运算自动生成 5 秒的短片,整个过程大概需要几分钟。目前 Luma AI 在文字生成视频方面的表现还有待提高,有时会出现视频模糊、变形或解析度品质过低的情况。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

4.照片生成 AI 视频方法

通过 Luma AI 测试用照片生成 AI 视频,发现这是 Luma Dream Machine 模型的强项,能将一张平面照片直接转换成动态视频效果,效果优于直接通过提示词生成的视频。直接在输入指令框内上传图片,并可搭配辅助文字提示词,Luma AI 就会依据照片中的人物或场景自动生成更多动态视频画面。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频

结语

Luma AI 目前对免费用户提供每月 30 个视频生成额度,即每月可生成 30 个 5 秒钟的短视频。如果需要生成更多视频,则需要付费订阅。从目前 Luma AI 的发展趋势来看,未来每个人都将能够直接使用 AI 来制作视频,以最低成本制作动画、电影或短片将不再是梦。

Luma AI推出AI视频生成服务Dream Machine,通过自然语言描述生成逼真的视频
© 版权声明

相关文章

暂无评论

none
暂无评论...