视频参考输入
上传源视频,模型以此为基础引导输出内容的构图和动作。
将现有视频作为参考素材,用AI重新生成全新视觉风格的版本。
在Renoise Canvas中,将源视频作为视频参考上传,再输入目标风格的提示词。Seedance 2.0最多支持3个视频参考,模型会根据构图和动作引导生成新画面;Kling 3.0 Omni支持1个视频参考。输出是由原始素材引导的全新生成内容——动作和构图参考原片,但不保证逐帧精确对齐。
想对新视频控制镜头运动,而不是对已有视频做风格重绘? 查看AI动作控制指南
以视频为参考进行生成式风格重绘——不是滤镜,而是全新渲染。
上传源视频,模型以此为基础引导输出内容的构图和动作。
在提示词中描述目标视觉风格——电影感、动漫、霓虹黑色、水彩画均可。
输出是全新的生成内容,动作由参考引导,并非逐像素的精确迁移。
Seedance 2.0最多支持3个视频参考,跨片段融合构图。
从源视频到全新视觉风格,由模型引导,而非后期滤镜。

通过媒体库将视频作为视频参考添加到Canvas。模型将利用它引导输出内容的动作和构图。

在模型菜单中切换至Seedance 2.0,在提示词栏描述目标视觉风格——包括光线、色调和整体美学。

运行生成,将结果与源视频对比。调整风格提示词或参考权重,反复生成直至达到理想效果。
以视频为参考重新生成的片段——构图参考原片,视觉风格由提示词决定。

城市行走片段以Ghibli动画风格重新生成。

白天街道素材重渲染为霓虹灯光、高对比度的黑色电影场景。

手持拍摄片段通过生成式重渲染赋予电影镜头质感和调色风格。

素材以油画/印象派风格重绘。
两者均支持视频参考。Seedance 2.0最多支持3个参考实现融合重绘;Kling 3.0 Omni支持1个参考,多主体一致性更强。
| 视频重绘维度 | Seedance 2.0Recommended | Kling 3.0 Omni |
|---|---|---|
| 视频参考数量 | 最多3个 | 1个 |
| 最适合 | 多片段融合重绘 | 单参考重绘,主体一致性强 |
| 原生音频输出 | ✓ | — |
| 原生口型同步 | — | ✓ |
| 片段时长 | 4–15秒 | 3–15秒(带参考视频时≤10秒) |
| 分辨率 | 720p / 1080p | 720p / 1080p |
关于Renoise中AI视频转换的能力边界,有必要直接说清楚,因为两种概念经常被混淆。
逐帧精确风格迁移会将一种视觉风格逐像素映射到源视频的每一帧上——内容完全保留,视觉风格叠加其上,类似于尊重帧边界的滤镜。专门的风格迁移工具和部分ComfyUI流程追求的就是这种效果。
生成式重绘则不同。你提供源视频作为参考,模型以其构图、动作和主体为引导,生成一段全新的视频。动作和构图参考原片,但模型是在以新风格重新渲染内容,而非追踪像素。这意味着输出可能与原片存在偏差:演员的表情可能略有变化、背景细节可能改变、时序也未必与原片帧帧对齐。对于审美层面的风格重绘——将真人视频转为动漫、叠加霓虹黑色调色、赋予电影质感——生成式重绘效果出色,迭代速度也比逐帧流程快得多。但如果内容需要像素级精确保留,则不适合用这种方式。
Seedance 2.0最多支持3个视频参考,可将多个片段的构图融合进重绘结果。Kling 3.0 Omni支持1个视频参考,在整段输出中的多主体一致性更强。两者都在同一个Canvas中运行,可以用同一段素材分别测试并对比效果。
视频转换重绘在同一Canvas中调用多参考视频模型。
最多支持3个视频参考,融合生成式重绘,原生音频输出。
视频参考重绘,整段输出中多主体一致性强。
在同一工作区上传视频参考、调整提示词、对比模型输出。
用自然语言描述目标美学风格——光线、色调、艺术指导均可。
一个方案解锁Seedance 2.0、Kling 3.0 Omni和多参考视频生成。
不完全是。逐帧精确风格迁移会将视觉风格逐像素映射到每一帧上。Renoise中的AI视频转换是生成式重绘:你提供源视频作为参考,模型以其构图和动作为引导生成新素材。视觉风格由提示词决定,与逐帧精确映射相比,内容细节可能存在轻微偏差。
Seedance 2.0适合融合式重绘——最多支持3个视频参考,可组合多片段构图。Kling 3.0 Omni适合单片段重绘,且对多主体一致性要求较高的场景。两者都在同一Canvas中,可用同一素材分别测试对比。
动作和构图以参考为引导,但不保证逐帧精确对齐。生成式重渲染意味着模型会解读动作并以新风格重建片段——并非后期处理滤镜。对于大多数审美风格重绘场景效果良好;如果内容需要像素级精确保留,则更适合使用专用抠像流程。
动作控制是指在从图片或文字提示生成的新视频中,控制镜头平移、缩放、环绕等运动方式。视频重绘是以已有片段为输入,改变其视觉风格。两者可以结合使用:先对片段进行风格重绘,再在后续生成中加入镜头运动。
可以——在提示词中描述目标动漫风格(Studio Ghibli、少年热血漫、扁平漫画风格),并将源视频作为参考上传。Seedance 2.0或Kling 3.0 Omni会以源视频动作为引导重新生成片段。如果动漫风格是主要需求,可参考专属动漫视频指南。
Seedance 2.0输出片段为4–15秒;Kling 3.0 Omni输出3–15秒(带参考视频时最长10秒)。对于更长的源素材,可将其分段处理,再在Canvas Timeline中拼接各段输出。