Runway新手必看!轻松掌握时尚秀场秘诀
宣战 Sora!Runway 最新视频生成模型Gen-3 Alpha爆火。迫不及待充值测评后,整理了相关文档仅供新手快速入门。
文章比较长,目录如下:
1.什么是Runway?
2.创建Runway账户
3.了解Runway的仪表盘
4.如何在Runway中进行提示
5.创建有效的Gen3提示的一些建议
6.示例提示
7.提示关键词
8.优秀案例
一、什么是Runway?
Runway是一家应用人工智能研究公司,致力于塑造艺术、娱乐和人类创造力的新时代。
最受欢迎的工具包括Gen-1(一种生成视频到视频的工具)、Gen-2(一种生成图像到视频或文本到视频的工具)、最新Gen-3 Alpha(快速且可控的下一代文本到视频技术)。
使用Runway?创作的界限不再取决于昂贵的设备、大量的空闲时间、获取场景/演员的通道或广泛的训练——唯一重要的因素是您的想法有多棒。

二、创建Runway账户
创建Runway账户,请前往注册页面:https://app.runwayml.com/login

1)使用电子邮件地址注册
1.输入您希望注册账户的电子邮件地址。
2.选择一个用户名。请注意,您选择的用户名将无法更改,且不能使用任何特殊字符,因此请谨慎选择!
3.选择至少6个字符的密码。如果您选择的密码太弱,您需要尝试通过添加数字、字符和符号来增强密码强度。
4.通过重新输入来确认您选择的密码。
5.在下一个屏幕上,输入您的名字和姓氏。请注意,您在这些栏位中输入的内容将显示在所有发票上,如果您选择升级账户或购买额外积分,这些信息将无法更改,因此请谨慎选择。
6.提交您的信息后,您输入的电子邮件将发送一个验证码。您有一个小时的时间从消息中获取验证码,并在下一个屏幕上输入。
2)使用Google注册
1.选择“使用Google注册”。
2.在弹出的窗口中,选择您希望创建账户的Google账户。
3.账户将自动创建在与您的Google账户关联的电子邮件下。您的用户名和账户名称也将直接从您的Google账户的姓名和电子邮件地址中提取。
3)使用Apple注册
1.选择“使用Apple注册”。
2.在弹出的窗口中,登录您的Apple ID。
3.账户将自动创建在与您的Apple ID关联的电子邮件下。您的用户名和账户名称也将直接从您的Apple ID的姓名和电子邮件地址中提取。
三、了解Runway的仪表盘
一旦您创建了账户,仪表盘将作为您的主页,可以快速访问Runway的全部创意套件。
1)首页(Home)
首页介绍了新工具Gen-3 Alpha,提供了Runway最受欢迎的AI工具,继续滚动可以看到一系列教程以及“发现与混搭”提交的可重复使用的提示。

2)Runway观看(Runway Watch)
Runway观看中的所有影片完全由Runway创作者制作和提交——如果您需要灵感或只是一些创意思考的食粮,不妨进入Runway观看,预览不同的内容频道。

3)所有资产(All Assets)
“所有资产”标签包含您在Runway上生成和上传的所有内容。虽然大部分生成的内容会自动排序,但您也可以根据个人喜好对内容进行排序和创建文件夹。

4)视频编辑项目(Video Editor Projects)
Runway的内部时间线视频编辑器提供了一个空间,您可以在此空间创建和访问您的视频编辑项目,将您生成的内容制作成任何纵横比、大小或长度的长篇作品。
5)视频(Videos)
视频工具以及所有音频工具都可以在此标题下找到。
1.生成视频(Generate Videos)
在“生成视频”下:文本/图像到视频、视频到视频、口型同步视频、帧插值等。

2.编辑视频(Edit Videos)
在“编辑视频”下:去除背景(也称为绿幕)、修补、调色、超慢动作、模糊面部、景深、场景检测、提取深度、模糊背景、运动追踪。
3.音频(Audio)
在“音频”下:生成音频、口型同步视频、清理音频、去除静音、转录、字幕。
6)图像(Images)
在这里,您可以找到创建和操作图像的工具。
在“生成图像”下:文本到图像、图像到图像、无限图像、图像变化。
在“编辑图像”下:扩展图像、帧插值、擦除并替换、背景混搭、图像变化、添加颜色、图像升级。
7)更多(More)
玩转3D捕捉,训练模型等。
在“3D”下:3D捕捉、3D纹理

在“AI训练”下:训练角色生成器、训练风格生成器、训练对象生成器。

四、如何在Runway中进行提示
学习如何使用Runway的生成工具达到您想要的结果,就像了解模型最好理解哪些类型的提示一样简单。您可能已经知道如何最好地向您熟悉的人解释某个情况、视觉或概念;知道如何向Runway模型解释情况、视觉或概念,是生成您能想象到的任何东西的最强大(但简单)的方法之一。
1)Runway提示不是对话式的
您可能遇到的其他生成或以AI为中心的服务(最常见的是大型语言模型,或LLMs)可能会鼓励您使用对话方式进行提示,以达到您想要的效果:
X “你能制作一个狗跳跃的视频吗?”
X “请给我讲一个关于两个朋友的故事。”
在Runway提示中,这些类型的对话添加会分散模型的注意力,阻止它创造您想看到的内容。相反,应该坚持描述视觉。
2)Runway提示不是基于命令的
与Runway的非对话式提示相似,我们的生成模型不是设计来遵循命令的。这可能看起来像是您在提供指令的一些示例:
X “在这段田野的剪辑中添加一只狗。”
X “让蜡烛熄灭。”
虽然看起来您是在提供方向,但我们的模型在寻找(并渲染)的是视觉描述(相机在看什么?),而不是命令。
3)Runway提示适用于一次一个视觉项目
目前,输入整个剧本或一系列镜头不会输出一个完整的多镜头电影或视频。相反,一个提示等于(创造)一个镜头(或如果您使用文本到图像,就是一个图像)。
4)Runway提示可以非常技术化
如果您是电影迷,具有制作知识,曾在电影现场工作,或者只是通常能够快速上网查看不同电影术语的含义(包括但不限于技术照明术语、特定相机规格和镜头类型/效果),使用技术电影术语进行实验可以提供出色的结果。例如,这里有一个经常创造出强烈、电影写实效果的提示,使用了技术电影术语:
“[主题] 清晰对焦,极为详细,写实,RAW原片,8k高清,RAW自然影院,16mm,用Portra 400胶片调色,超现实,电影感影片,次表面散射,光线追踪,体积光”
5)Runway生成视频提示尚不理解负面提示
负面提示是生成AI模型中常见的提示,用户提供他们不希望在结果中包含的描述性特征。以下是一些负面提示的示例:
X “构图差。”
X “焦点不清。”
X “照明差。”
除了文本到图像有一个单独的输入框用于负面提示外,我们的生成视频模型目前还不理解负面提示,所以请不要包括它们。
6)Runway提示最好是描述“相机”正在捕捉的内容
要生成您能想象到的任何东西(甚至更多),学习如何视觉上描述一个镜头是掌握Runway提示的绝对最佳方式。
五、创建有效的Gen3提示的一些建议
1)清晰的结构
相机移动:从镜头类型或相机移动开始。
场景描述:描述场景的主要元素和主题。
额外细节:添加关于照明、情绪或特定动作的任何额外细节。
2)强化
在不同部分重复或强化关键思想以提高遵循性。
3)专注于场景元素
具体说明场景中应包含的内容。不要说“没有云”,而是说“晴朗的天空”。
4)使用关键词
包括风格、动作和相机技术的关键词来指导输出。
5)尝试不同的相机角度
使用各种相机角度和移动来创建动态且引人入胜的镜头。
6)融入照明风格
详细描述照明,如“漫射照明”或“侧光”。
7)动作速度和类型
指定相机移动的速度和类型,如“动态运动”或“慢动作”。
8)风格和美学
包括总体风格的描述,如“情绪化”、“电影化”或“故障核”。
9)避免使用名人名字
描述角色的外貌和属性,而不是使用名人的名字。
10)迭代和实验
不要犹豫尝试不同的提示并根据结果进行改进。
六、示例提示
1)无缝过渡:
2)详细描述:
3)赛博朋克场景:
七、提示关键词
八、优秀案例
