00本页目标
- 知道 Runway Gen-3、Luma、可灵、Pika 各自适合什么镜头。
- 跑通「Midjourney 出图 → 放大 → 图生视频」的标准流程。
- 能用 10 种英文运镜词控制推拉摇移跟升降。
- 理解角色一致性、视频重绘和长视频拆分。
一句话原则：视频的稳定性，八成取决于首帧和运镜描述；不要指望一个模糊的提示词让模型自己猜镜头。
01视频工具库：先选对镜头
| 工具 | 优点 | 局限 | 适合 |
|---|---|---|---|
| Runway Gen-3 runwayml.com | 镜头运动控制成熟，画面电影感强，工具链完整 | 额度消耗较快，长镜头一致性需要多次试 | 广告感镜头、电影感运镜、商业短片 |
| Luma Dream Machine lumalabs.ai | 图生视频自然，运动流畅，界面简单 | 精细运镜和角色一致性不如专业工作流 | 快速概念片、氛围镜头、产品动态 |
| 可灵 Kling klingai.com | 中文提示词友好，人物动作自然，国内访问方便 | 高峰排队，复杂运镜需要多次生成 | 中文用户、人像动态、短视频镜头 |
| Pika pika.art | 上手快，特效和变形玩法多，适合社交媒体 | 写实商业镜头稳定性一般 | 创意短片、社媒动效、快速试验 |
工具只是镜头语言的一部分。商业项目里，先看首帧质量和镜头可控性，再看价格；不要为了「新工具」牺牲画面稳定性。
02图生视频（I2V）标准流程
第一步：在 Midjourney 生成一张构图清楚、主体完整的首帧图；不要用太小的主体或过度裁切的画面。
第二步：放大到视频工具需要的分辨率，修掉明显瑕疵；低清首帧会让视频糊和抖。
第三步：把首帧导入 Runway / 可灵 / Luma，选择图生视频，填写运镜和动作描述。
第四步：先做 4 秒测试，确认主体没有变形、镜头方向正确，再延长或批量生成。
第五步：导出后用剪辑软件补音乐、字幕和转场；需要长视频就拆成多个镜头。
首帧检查：主体边缘清楚、背景有层次、光线方向明确。首帧越像一张成熟商业照片，视频越容易稳定。
0310 种镜头运动与英文提示词
| 中文 | English prompt | 用法 |
|---|---|---|
| 推镜 | push in / dolly in | 强调主体，适合产品细节和情绪推进 |
| 拉镜 | pull out / dolly out | 揭示环境，适合结尾和空间关系 |
| 左摇 | pan left | 横向展示场景，保持机位不移动 |
| 右摇 | pan right | 跟随视线或展示另一侧空间 |
| 上摇 | tilt up | 从产品到人物、从地面到建筑 |
| 下摇 | tilt down | 从人物到产品、从全景到细节 |
| 跟拍 | tracking shot / follow shot | 人物行走、车辆移动、连续动作 |
| 升镜 | crane up / boom up | 从局部升到全景，增加仪式感 |
| 降镜 | crane down / boom down | 从全景落到主体，适合开场 |
| 环绕 | orbit shot / 360-degree orbit | 产品展示、人物旋转、空间展示 |
提示词里只写一种主运镜，不要同时写 push in 和 pull out。需要复合运动时，用「主运镜 + 轻微辅助运动」，例如 slow push in with a slight pan right。
04视频专属提示词公式
[主体动态] + [环境动态] + [镜头运动] + [光影]。和静态图不同，视频提示词要描述「什么在动、怎么动」，而不是堆形容词。
产品：a glass perfume bottle slowly rotating on a stone podium,
soft silk moving gently in the background,
slow push in, rim light, cinematic commercial --duration 4s
人物：a model walking forward through a sunlit street,
hair and coat moving naturally in the wind,
tracking shot, golden hour, shallow depth of field --duration 4s
- 主体动态：rotate、walk、turn、look up、smile、lift。
- 环境动态：wind blowing、water rippling、smoke drifting、traffic passing。
- 镜头运动：push in、pull out、pan、tilt、track、orbit。
- 光影：golden hour、rim light、softbox、neon glow。
05局部动态控制（Motion Brush）
Motion Brush 用来解决「主体要稳、局部要动」的问题：人物或产品保持不动，只让水流、烟雾、头发或衣摆动。它比整段视频重新生成更容易控制，也更适合商业产品镜头。
Runway 的画笔流程
导入首帧，进入 Motion Brush / Brush 工具，先把笔刷调小一点。
只涂抹需要运动的部分：水流、烟雾、发丝、布料边缘；不要把主体整块涂进去。
给涂抹区域设置运动方向与强度；主体区域保持未涂抹，避免被一起带动。
先跑 2–4 秒低分辨率测试，确认主体稳定、局部运动自然，再提高质量。
如果背景也被带动，减小笔刷范围或降低运动强度，不要一味拉高。
可灵 / Kling 的局部动态
在可灵的图生视频里找到「局部动态 / 运动笔刷」类功能，用画笔圈出水流、烟雾或头发区域，设置运动方向和幅度。人物和产品保持不涂抹，镜头运动尽量选「固定」或轻微推拉，避免和局部动态打架。
| 想动的元素 | 涂抹范围 | 建议 |
|---|---|---|
| 水流 / 饮料 | 液体表面和飞溅区域 | 小幅向上或向外，强度低，避免主体跟着漂移 |
| 烟雾 / 香气 | 烟雾边缘和源头 | 缓慢上飘，方向统一，避免多处乱流 |
| 头发 / 衣摆 | 发梢、衣角，不涂脸部 | 侧向微风，强度从低到中，先测试 |
常见错误：把整个人或整个产品都涂满，会得到「整体漂移」而不是局部动态；正确的做法是只涂需要动的边缘和材质，主体保持干净。
06视频重绘与长视频：角色一致性
视频工具直接生成的 4–10 秒片段，很难自动保持角色和产品完全一致。商业项目通常用「首帧 + 参考图 + ControlNet」来锁角色：先把角色或产品做成 LoRA，再在视频重绘工作流里用 OpenPose 固定动作、Depth 固定空间、Canny 固定外形。
- 从视频抽关键帧，逐帧用 ControlNet 约束角色结构和产品轮廓。
- 用 IP-Adapter 或角色 LoRA 保持脸部、服装和产品一致。
- 长视频拆成多个 4–8 秒镜头，每个镜头单独控制，再用剪辑软件串起来。
- 镜头之间用最后一帧作为下一段首帧，减少角色跳变。
现实提醒：长视频的时序一致性仍然是难点。商业项目优先分镜、分段生成、后期剪辑，不要指望一次生成 30 秒。
本页验收
用一张你自己生成的图，在可灵或 Runway 里生成一段 4 秒的运镜视频（例如 Zoom in），保留首帧、提示词和参数。
交付物：首帧图 + 4 秒视频 + 提示词与运镜参数 + 一句话复盘「哪里稳定、哪里需要重做」。
自检清单0 / 4 已完成
07自测
图生视频为什么要先放大首帧？
低分辨率首帧会让视频模糊、抖动，细节不足。先放大并修掉明显瑕疵，视频模型才有稳定的起点。
视频提示词和图片提示词最大的差别是什么？
视频要描述主体动态、环境动态和镜头运动；只写静态风格词，模型不知道画面该怎么动。
长视频的角色一致性怎么做？
拆分成多个短镜头，用 LoRA/IP-Adapter 锁角色、ControlNet 锁结构，用上一段末帧作为下一段首帧，最后剪辑串接。