Luma Dream Machine 使用前须知

近期最火的AI 影片生成网站,Luma Dream Machine,如同其名就像是个专业影像造梦机,能够透过简单明了的文字指令或照片快速生成高品质的短影片,而且介面简洁、直观,入门毫无难度,当然,Luma Dream Machine 也不只有「文字转影片」或「图片转影片」的功能,随着版本的更迭,近期还新增了一些实用小功能,帮助用户更轻鬆、顺利使用这套工具,再加上它也有付费及免费版本,因此本篇将详细介绍其方案差异和优势特色,后文也会对主要功能进行教学。

Luma Dream Machine 优缺点

根据 Luma Dream Machine 的官方介绍,其採用了一个专门用来训练影片的Transformer 模型,这套模型具有可扩展性、稳定和高效处理特色,可以根据用户所输入的主体细节、背景和运镜描述,又或是静止的图像,精準生成与之相符且具有故事性的动态影像,最厉害的是,还能够理解人物、动物或物体之间的相互关係与逻辑性,大幅避免创作出「太猎奇」的影片作品。从笔者实测结果来看,透过 Luma Dream Machine 生成出来的影片,整体运镜效果相当自然出色,虽说免费用户,在线上人数较多的情况下,偶尔会出现硬切等粗糙的转场效果出现,不过大多时候的处理成效都让人十分满意。

目前不论是下达文字指令制作影片或使用图片生成影片的方式,Luma Dream Machine 每次都仅能生成最长 5 秒的影片,不过日前新增了「Extend」扩增影片长度的功能,每次约能扩展 5 秒的影片长度。要注意的是,每支影片生成速度不定,主要依据当下网站使用人数多寡及是否为付费订阅用户而定,若是付费用户和网站人流不塞的情况下,通常只需短短 2~-5 分钟就能生成出一支短影片,不过假设同时在线使用人数较多且为免费用户,那么有时也会出现等待数小时的情况。

▲ Luma Dream Machine 虽然支援中英文文字指令,但透过英文指令生成的短影片成果较为精緻。

免费与付费的功能差异

在 Luma Dream Machine 免费方案中,每个免费用户每个月最多有 30 个免费生成机会,但每天最多只能生成 5 支短影片,而且不支援去浮水印和商业使用,也未享有优先处理权,比较适合个人非商业用途或尝鲜族群。另外,付费订阅方案则细分成轻享版(Lite)、标準版(Standard)、进阶版(Plus)、专业版(Pro)和高级版(Premier)五种,价格从最低每月 9.99 美元至每月最高 499.99 美元,年订阅用户则享有原价 8 折优惠。

▲ 免费订阅用户每天最多生成 5 支影片,且支援最多同时处理 2 支影片。

如何免费注册使用 Luma Dream Machine?

Luma Dearm Machine 网址:https://lumalabs.ai/dream-machine

开启 Luma Dream Machine 的网页后,右上角会出现「Try Now」的标示,可以选择直接连动 Google 帐户,接着输入该帐号的密码即可登入使用,不用几分钟就能完成,也不必像一些软件的免费试用版需要绑信用卡才能注册。登入后,页面会转至 Account 帐户画面,若有付费升级需求,即可在此页面点选所需方案,若无则可点选右上角「Create」开始创作。要注意的是,由于目前 Luma Dream Machine 使用人数众多,有时会出现无法顺利进入「输入指令」的操作页面情况,需要排队等候进场,因此,如果是有急用需求,建议直接付费解锁快速通关,享受进阶服务。

步骤 1:进入 Luma Dream Machine 的网页后,点选右上角的「Try Now」标示。

步骤 2:接着点选「Sign in with Google」选项。

步骤 3:下一步直接择一 Google 帐号来快速登入绑定。

步骤 4:登入完成后,点选画面中的「Subscribe」订阅选项。

步骤 5:最后会进入帐户页面,并显示当前订阅的方案与其规範,另也提供不同付费选项,若无升级需求,直接点击右上角的「Create」即可进入创作页面。

善用「Idea」来激发创作灵感

Luma AI 的创作页面十分简洁,看起来就像一个搜寻引擎般,在主页中间只有一个指令输入栏位,没有相关的辅助功能,也没有範本或其他用户的作品供参考,因此,对于初次使用的人来说可能会有些茫然,不知从何下手。这时不妨利用搜寻栏位下方的「Idea」功能,只要按一下,系统就会随机产生一段提示词,若对系统给出的提示语句不满意,那么可以再点击「重新整理」图示,像骰子般每按一次就自动给出不同的提示句,让你可以不用无中生有、凭空想像文字指令,直接使用 Idea 来生成一段短影片,对于没灵感的时候或是新手来说是不可多得的实用功能。

步骤 1:在创作页面中,只有一个输入指令的栏位,在输入栏下方可看见「Idea」按扭,点一下即可直接套用其提示句,或点击「重新整理」来产生新的指令。

步骤 2:输入指令后,指令框下方会出现两个选项,当勾选「Enhanced Prompt(增强提示)」代表能用简短的提示词,让系统自动生成额外描述内容。

步骤 3:描述栏下方还有一个「Loop」功能, 让使用者能透过文字描述、图片和短影片来制作出无限循环播放的影片。选择完毕后,点击「送出」生成影片。

步骤 4:影片生成通常需要数分钟到数小时之间,生成好的短影片会出现在「Your Creations」生成页面,点击影片即可放大阅览。

步骤 5:在影片下方共有「Extend(扩展)」、「Download(下载)」和「Delete(删除)」三个按扭,可根据需求来选择。

学用「提示词」生成影片,借助ChatGPT 产生英文指令

虽说 Luma Dream Machine 支援中文提示指令,但经笔者测试发现,即便输入相同意思的中文和英文提示句,最终英文提示句所生成的短影像,整体画风更精美细腻,运镜效果也更为流畅自然,而运用中文提示词所制作出来的影片,各方面看起来都相对阳春和简朴,因此,笔者强烈建议透过英文提示词来生成影片为佳。至于提示词可以适当加入「主体特徵」、「动作」、「场景和背景」及「运镜效果」等描述,基本上内容描述越具体,便会得到越理想的效果。为了帮助读者能制作出更贴近需求的短影片作品,这里我们也将教学搭配 ChatGPT 来辅助生成更符合 Luma AI 的英文提示语句。

步骤 1:在指令框中可输入中文或英文提示语句(下图先以中文提示词示範),完成后按下送出。

步骤 2:接着同样等待几分钟,让 Luma AI 生成短影像,从下图可见,虽说成品的场景大致符合描述,但人物五官描绘略显潦草且运镜方式也相当粗糙。

步骤 3:这时不妨将 ChatGPT 训练成 Luma 提示词生产器,登入后,在对话栏输入图片中的文字来定义 ChatGPT,并给出中英文範例让 ChatGPT 理解。

步骤 4:日后,只需要在对话框中输入「/」和自己想要生成的中文描述,ChatGPT 就会帮忙生成英文提示词了。

步骤 5:将 ChatGPT 生成出来的提示词複制起来,并贴在 Luma AI 提示框中送出,从影片成果来看,其整体画风、人物细节和镜头转换都更上一层。

搭配「Extend」功能扩展影片长度

如前文提及,Luma Dream Machine 基本上最高只能生成 5 秒的短影片,所以如果想要延长影片长度,不妨利用介面中一项名为「Extend」的影片功能,这个功能能够智慧分析影片内容,同时根据用户的提示词,在保持原有影片风格、场景连贯性和人物对象一致性的基础上,每次轻鬆将影片时间延长约 5 秒左右,且无需担心影片品质或风格改变。

步骤 1:第一步,在你的生成页面上,找到想要延长的影片,并点击影片下方标有「Extend」的按钮。

步骤 2:这时可以在提示框中输入其他细节或调整,以指定希望在影片延长部分中看到的内容,若无亦可直接送出生成影片。

步骤 3:输入完毕后,可以自由选择是否要由系统协助「Enhance Prompt」增强提示,完成后按下「送出」。

步骤 4:AI 将影片从原始影片的最后一帧开始再延长 5 秒,每次延长将消耗 1 次生成机会,完成后点击「Download」,就能将影片下载成 mp4 档案。

步骤 5:将下载好的影片点开后,可见影片长度确实增长到近 10 秒左右。

利用「图片」生成影片,还能指定起始与结束画面

Luma Dream Machine 的另一个强项是用图片生成影片,使用者可以使用一些实际拍摄的照片,如自拍照、动物写真照等,或是电绘图作为输入,唯独要留意的是,这些图片的格式必须是 JPG、JPEG 或 PNG 档案,将图片上传后,还可描述图片中的重要细节、场景中所需的动作或运镜效果,帮助 AI 制作出更具表现力的短影片。值得留意的是,Luma Dream Machine 的图片生成影片功能,不仅能够让单一图片动起来,目前它还支援最多上传 2 张图片,而且还能根据上传的图片顺序决定起始与结束画面,将 2 张图片元素以动画的方式融合成一段 5 秒的短影片,带来更引人入胜的影片作品。

步骤 1:在生成页面上,点击一下提示词框前方的「图片」图示。

步骤 2:下一步,选择要制作成动态影像的照片。

步骤 3:可以输入运镜方式或呈现效果来辅助生成,这里我们先不输入指令,勾选「Enhance prompt」选项、按下「送出」,让 AI 自由创作。

步骤 4:从成果来看,AI 自动处理创作出重机行驶在高速公路的动态影像,后侧的建筑物跟着变动,人物的头髮亦出现飘逸感,整体效果已让人十分满意。

步骤 5:当然,如果想要自行指定画面的运镜方式,也可在上传完图片后,直接于提示词框中描述期望达到的效果。

步骤 6:将图片与指令送出后,基本上会得到更接近期望的成果,如果出现运镜偏差的情况,那么可以透过多刷几次指令的方式来解决。

步骤 7:此外,如果想要将两张图片串联成一支短影片,那么第一步一样先点击「图片」图示。

步骤 8:再来,按住「Ctrl」键选择并开启两张图片。

步骤 9:要注意的是,左边的图为影片的起始画面,右图则是结束画面,如果要变换顺序,则可将滑鼠游标移动到图片位置,并点击「交换顺序」图示即可。

步骤 10:图片上传完毕后,在送出生成短影片之前,同样可以输入想要呈现的运镜等相关提示词。

步骤 11:最后,透过两张图片生成出来的影片效果十分出色,不过要提醒,两张图片的主体位置尽量相近,生成出来的影像看起来才更自然、不会过于突兀。

本文同步刊载于 PC home 杂誌

欢迎加入 PC home 杂誌粉丝团!

 

延伸阅读:OpenAI预计两週内推出Strawberry模型,订阅费用可能提高到每月约台币6500元
延伸阅读:音乐制作人学会用AI诈骗串流网站:1000个机器人猛听数十万首AI歌曲,骗取1200万美元版税
延伸阅读:Red Hat Enterprise Linux AI 正式推出,赋能使用者无缝开发、测试、执行生成式 AI 模型