Runway Gen-3完整操作手册:从文本到电影级AI视频的终极创作指南
概述
Runway 是全球AI视频生成领域的先驱和领导者,其最新旗舰模型 Gen-3 Alpha 代表了当前文生视频技术的最高水准。与传统的视频编辑软件不同,Runway 将生成式AI深度融入创作流程,让你只需输入一段文字描述或上传一张图片,就能生成具有电影质感的短视频片段。它不仅仅是一个视频生成工具,更是一个完整的AI辅助视频创作平台。
Runway 成立于2018年,总部位于纽约,是首批将扩散模型应用于视频生成的团队之一。2023年,Runway 与 Getty Images 达成合作,推出面向商业用途的 AI 视频模型。Gen-3 Alpha 于2024年发布,在画面一致性、物理模拟准确度和光影表现上实现了质的飞跃 — 生成的人物面部不再扭曲变形,物体的运动轨迹符合真实物理规律,光影过渡自然流畅。
目前 Runway 提供 Web 端和 iOS 移动端使用,支持免费试用积分。付费方案从每月 $15 的基础版到 $95 的无限制版,企业用户还可以使用 API 接口进行批量视频生成。本手册将从零开始,带你完整掌握 Runway Gen-3 的全部核心功能。
核心功能一览
Runway Gen-3 平台包含五大核心模块,分别对应不同的视频创作需求:
| 功能模块 | 说明 | 适用场景 |
|---|---|---|
| Text to Video | 输入文字描述,AI直接生成视频 | 创意概念验证、短视频素材制作 |
| Image to Video | 上传静态图片,AI将其转化为动态视频 | 静态图转动态、产品展示、老照片活化 |
| Video to Video | 上传一段视频,AI根据风格描述进行转换 | 风格迁移、特效添加、画面重构 |
| Motion Brush | 在画面上用画笔指定运动方向和区域 | 精确控制画面中特定元素的运动 |
| Camera Controls | 模拟虚拟摄影机运动(推拉摇移) | 增强画面镜头感,营造电影氛围 |
Runway 旗下还有多个专用工具,如 Green Screen(智能抠像)、Inpainting(画面修复)、Super-Slow Motion(超级慢动作)、Frame Interpolation(帧插值平滑)等,这些工具已集成在平台的编辑工作流中。
详细教程
第一步:注册与账户设置
- 访问 runwayml.com,点击右上角「Sign Up」注册账号。支持 Google、Apple 或邮箱注册。
- 新用户注册后自动获得 125 个免费积分(约可生成 25 段 4 秒视频),无需绑定信用卡。
- 登录后进入 Dashboard,左侧导航栏包含:Generate Videos(视频生成)、Assets(素材管理)、Teams(团队协作)、Billing(订阅管理)。
- 建议先在 Billing 页面熟悉积分消耗规则:Gen-3 Alpha 模式下,每生成 1 秒视频消耗 5 积分。
第二步:Text to Video — 文字生成视频
这是最核心、使用频率最高的功能。具体操作流程如下:
- 在 Dashboard 点击「Generate Videos」,选择「Gen-3 Alpha」模型。
- 在提示词输入框中输入你的视频描述(英文效果最佳,支持上限约 500 字符)。
- 提示词公式:
[主体] + [动作] + [场景/环境] + [光线/氛围] + [镜头/构图] + [画质风格]
示例提示词:
A young woman wearing a flowing white dress walks slowly through a misty bamboo forest at golden hour, soft sunlight filtering through the leaves, cinematic lighting, shallow depth of field, slow motion, 4K, photorealistic
- 设置生成参数:
- Duration:选择 5 秒或 10 秒(10 秒消耗双倍积分)
- Aspect Ratio:16:9(横屏)、9:16(竖屏)、1:1(方形)
- Seed:可选,固定随机种子保证可复现性
-
Negative Prompt:可选,排除不想要的元素
-
点击「Generate」,等待约 30-90 秒,系统会生成 4 个备选片段。
- 在上方预览区切换查看,选择最满意的一个。点击片段可进入详细预览,使用空格键播放/暂停。
- 满意的片段点击「Export」导出为 MP4 文件(1080p,需要付费方案升级到 4K)。
关键参数说明:
| 参数 | 推荐值 | 说明 |
|---|---|---|
| Duration | 5秒 | 更稳定,人物动作更连贯;10秒适合风景类 |
| Aspect Ratio | 16:9 | 横屏适配网站、YouTube;9:16适配TikTok/Reels |
| Seed | 可选 | 同一Seed+同一Prompt可复现相同结果,适合微调 |
| Prompt长度 | 50-150词 | 过短缺乏细节,过长可能互相矛盾 |
第三步:Image to Video — 图片转视频
将静态图片转化为动态视频是 Runway 的另一大杀器。它支持JPG、PNG、WebP格式,建议上传 1920x1080 以上分辨率的图片。
操作步骤:
- 点击「Image to Video」标签页,上传你的图片(支持拖拽或从 Assets 库选择)。
- 可选填写补充提示词(Prompt),描述你希望图片中哪些元素运动、以何种方式运动。如果留空,AI会自动识别图片内容并生成合理的运动。
- 调整 Motion 滑块(1-10),数值越高运动幅度越大:
- 1-3:微动效果,适合人像呼吸感、水面微澜
- 4-6:中等运动,适合云朵飘动、树叶摇曳
- 7-10:剧烈运动,适合快速移动、大幅度动作
- 点击生成,等待约 45-60 秒。
效果最佳的上传图片类型: - 有明显主体和背景分离的图片(人物肖像最佳) - 包含可自然运动元素的场景(水面、火焰、旗帜、头发、衣物) - 风景照(云、水、树)— 运动效果最自然 - 避免:纯文字、平面图形、过于复杂的群体场景
第四步:Video to Video — 视频风格转换
这个功能可以将现有视频转换成不同的艺术风格,同时保留原始视频的运动结构和时序信息。
操作步骤:
- 选择「Video to Video」标签页,上传一段10秒以内的原始视频。
- 在提示词中描述你想要的输出风格,而不是运动内容。AI会保留原始视频的结构,但用新风格渲染。
- Style Strength 滑块(0-100):控制风格化程度。
- 0-30:保守,轻微风格化,保留原始画面更多
- 30-70:平衡,明显风格变化但保留可辨识度
- 70-100:激进,完全风格化,可能丢失原始细节
- 点击生成,等待约 60-120 秒(处理时间比文生视频更长)。
风格提示词示例:
// 动漫风格
anime style, Studio Ghibli aesthetic, hand-drawn animation, vibrant colors
// 油画风格
oil painting style, thick brushstrokes, impressionist, Van Gogh inspired
// 赛博朋克风格
cyberpunk aesthetic, neon lights, rain-slicked streets, blue and purple color palette, Blade Runner atmosphere
// 复古胶片风格
vintage 8mm film look, film grain, light leaks, warm sepia tones, nostalgic
第五步:Motion Brush — 精确运动控制
Motion Brush 是 Runway 最具创新性的功能之一,让你像画画一样精确控制画面中不同区域的运动方向、速度和幅度。
操作步骤:
- 在图像生成界面选择「Motion Brush」模式。
- 在画面上用画笔涂抹你希望运动的区域(支持多种画笔大小)。
- 每个涂抹区域可以独立设置运动参数:
- Horizontal(水平):-10到+10,正值向右,负值向左
- Vertical(垂直):-10到+10,正值向上,负值向下
- Amplitude(幅度):0到10,控制运动幅度
- 如果想让某些区域保持静止,使用「Freeze Brush」涂抹该区域。
- 点击生成,AI会根据你的笔刷设定驱动画面运动。
实用场景: - 让人物的头发和衣角飘动,身体保持静止 - 让背景的云和树运动,前景建筑完全静止 - 为产品图添加微动(灯光闪烁、背景动态模糊)
实战案例
案例一:产品宣传短视频(Text to Video)
目标:为一款高端香水制作30秒宣传片段
提示词策略(分3段生成,后期拼接):
片段1(特写):Extreme close-up of a luxury perfume bottle with golden cap on a dark marble surface, a single drop of water slowly sliding down the glass, dramatic studio lighting with soft rim light, cinematic depth of field, 4K, photorealistic, slow motion
片段2(环境):Elegant lily flowers blooming in slow motion, soft morning light streaming through sheer curtains, dew drops on petals, shallow depth of field, dreamy atmosphere, 4K
片段3(氛围):Golden particles floating gracefully in the air against a dark background, bokeh effect, luxurious warm amber tones, cinematic, 4K
后期处理:将3个片段导入剪辑软件,添加品牌Logo、背景音乐和淡入淡出转场,成品即可投放到社交媒体。
案例二:老照片修复并活化(Image to Video)
目标:将一张1950年代的黑白家庭合影转化为动态彩色视频
步骤:
1. 先将老照片用 AI 图片修复工具(如 Magnific AI)进行画质增强和上色。
2. 将修复后的图片上传 Runway,选择 Image to Video。
3. Motion 设为 3(微动),添加提示词:gentle breeze moving the fabric, soft natural sunlight, subtle facial expressions, nostalgic atmosphere
4. 生成后导出,在剪辑软件中添加老式胶片滤镜和背景音效,营造怀旧氛围。
案例三:MV 分镜创作(Text to Video + Motion Brush 组合)
目标:为独立音乐人制作歌词MV
步骤: 1. 将歌曲分解为6-8个关键片段,为每段设计一个画面主题。 2. 用 Text to Video 逐一生成(固定16:9,5秒)。 3. 对需要特殊运动效果的画面使用 Motion Brush 精确控制。 4. 将所有片段导入剪辑软件,按歌曲节奏剪辑,添加歌词字幕。 5. 使用 Frame Interpolation 工具将关键帧之间做平滑过渡。
进阶技巧
1. 提示词系统化工程
经过大量实测,总结出最有效的提示词结构模板:
第一层(主体描述):[年龄/性别/特征] + [服饰/道具]
第二层(动作描述):[具体动作] + [运动方式] + [速度]
第三层(场景描述):[地点] + [时间/季节] + [天气]
第四层(光线描述):[光源类型] + [光线方向] + [光质]
第五层(镜头描述):[景别] + [角度] + [景深]
第六层(风格描述):[画质] + [风格参考]
对比实例:
- ❌ 差的提示词:a man walking in a city
- ✅ 好的提示词:A middle-aged businessman in a navy suit walking briskly through Shinjuku crossing at dusk, neon signs reflecting on wet pavement after rain, warm amber street lights mixed with cool blue neon glow, medium shot from low angle, shallow depth of field, cinematic, 4K, photorealistic
2. 负向提示词微调
当生成结果出现重复问题时,使用负向提示词精确消除:
| 常见问题 | 负向提示词 |
|---|---|
| 人脸扭曲变形 | deformed face, distorted facial features, asymmetrical eyes, blurry face |
| 多余手指/肢体 | extra fingers, fused fingers, too many fingers, extra limbs, mutated hands |
| 画面抖动闪烁 | flickering, jittery motion, unstable camera, frame jumps |
| 文字/水印出现 | text, watermark, logo, signature, subtitles |
| 色彩过饱和 | oversaturated, too vibrant, unnatural colors, harsh contrast |
3. Seed 值的进阶用法
Seed 参数不仅用于复现,还能实现「微调式迭代」:
- 固定 Seed + 微调 Prompt:替换提示词中的 1-2 个关键词(如把"红色衣服"改成"蓝色衣服"),其他不变,保持相同 Seed,可以获得画面构图一致但细节不同的版本。
- 随机 Seed 探索 + 固定最佳 Seed:先用随机 Seed 生成 5-8 轮,选出最满意的一轮,记录其 Seed 值,之后在同一 Seed 下微调。
- Seed 范围探索:在固定 Prompt 下尝试 Seed=1, 100, 500, 1000 等跳跃值,了解不同 Seed 带来的画面差异。
4. 多片段叙事构建
单段10秒视频的叙事能力有限。使用「分镜法」构建完整叙事:
- 建立镜头(Establishing Shot):场景全景,交代环境。
- 中景(Medium Shot):主体引入,展示动作。
- 特写(Close-Up):关键细节或情绪表达。
- 反应镜头(Reaction Shot):对环境或事件的反应。
- 结尾镜头(Closing Shot):总结性或过渡性画面。
每个镜头独立生成,确保风格一致性(统一使用相同的风格关键词),然后按叙事顺序拼接。
5. 色彩一致性与批量生成
当需要生成多段保持视觉风格统一的视频时:
- 创建一个「风格模板」提示词,如:
warm golden hour lighting, Kodak Portra 400 film aesthetics, soft grain, cinematic color grading, slight desaturation - 在每个片段的提示词末尾追加此模板。
- 建议固定 Seed 为同一数值,减少画面风格波动。
- 生成后使用 DaVinci Resolve 或 Premiere Pro 统一调色,微调色彩匹配。
常见问题
Q1:为什么生成的人物面部会变形?
Gen-3 Alpha 在人脸一致性上已大幅改进,但在以下情况仍可能出问题:人物占比过小(小于画面10%)、面部被遮挡、快速运动、多人场景。解决方案:增大人物在画面中的占比,使用特写或中景构图,在负面提示词中添加 deformed face, distorted features。
Q2:免费积分用完后如何获得更多?
免费积分不会自动补充。可选方案:(1) 订阅付费方案(Basic $15/月含625积分);(2) 参与 Runway 社区活动获取额外积分;(3) 邀请好友注册(双方各得积分)。
Q3:生成的视频可以商用吗?
付费方案(Basic 及以上)用户享有生成内容的完整商业使用权。免费方案用户生成的内容仅限个人非商业用途。注意:使用他人图片作为 Image to Video 输入时,仍需确保原图版权合规。
Q4:Gen-3 Alpha 和 Gen-2 有什么区别?
Gen-3 Alpha 相比 Gen-2 的核心提升:(1) 画面清晰度提升约40%,细节更丰富;(2) 人脸和手部生成质量质的飞跃;(3) 物理运动模拟更准确(水流、布料飘动);(4) 生成速度提升约30%;(5) 支持更长的提示词(500字符 vs 320字符)。
Q5:能否生成超过10秒的视频?
Gen-3 Alpha 单次生成上限为10秒。制作更长视频的方法:(1) 分段生成后拼接;(2) 使用 Frame Interpolation 在片段间插入过渡帧;(3) 在剪辑软件中使用交叉溶解转场。
Q6:中文提示词能用吗?
官方推荐英文提示词,但从实测来看,中文提示词也能使用,只是效果不如英文精确。很多AI术语在英文中表达更准确。建议:先用中文构思,用翻译工具转为英文,再微调术语。
Q7:生成的视频有水印吗?
Gen-3 Alpha 生成的视频右下角会有 Runway 水印。付费用户可以去除水印。另外,如果视频用于商业项目,建议在剪辑时做画面裁切处理。
总结
Runway Gen-3 Alpha 正以前所未有的速度降低视频创作的门槛。从专业的影视制作人到零基础的内容创作者,每个人都能在这个平台上找到适合自己的创作方式。
掌握 Runway 的关键不在于记住每一个按钮,而在于培养「AI导演思维」——学会用自然语言精准描述你脑海中的画面,理解镜头语言和光影逻辑,像导演一样思考画面构图、运动节奏和情绪传达。
我们建议的学习路径:先用 Text to Video 练手,逐步探索 Image to Video 和 Motion Brush,最后尝试用 Video to Video 进行风格化创作。每天花15分钟生成3-5个片段,观察不同提示词的生成效果差异,一周后你就能熟练驾驭这个强大的AI创作工具。
AI视频生成的技术迭代速度飞快,Gen-3 Alpha 之后还会有 Gen-4、Gen-5 乃至更强的模型。但核心理念不变:技术是工具,创意才是灵魂。Runway 给了你无限的画面可能性,接下来就看你的想象力能飞多远了。
本文由 AIGC-Sora.com 原创发布,发现更多 AI 工具请访问 https://aigc-sora.com