返回博客
综合

如何在动作迁移 AI 视频中保持角色一致

动作迁移可以在更换表演者的面部、服装或身材比例的同时保留表演效果。本教程将展示如何使用三视图参考表固定虚构角色、准备驱动视频,并检查最容易出现身份漂移的画面。

如何在动作迁移 AI 视频中保持角色一致
MagicBoat AI8 分钟阅读97 次阅读
文章目录

保留表演,而不是表演者的身份

当你为系统分配两个独立任务时,动作迁移的效果最佳:从驱动视频中提取动作,并从经过批准的角色参考图中提取外观。如果其中任何一项指令不明确,转身、抬臂或快速手势都可能改变角色的面部或轮廓。

本教程将跟随一名虚构角色 Mara 完成一段简短的舞蹈动作:她向前迈步,向左转身,然后抬起右手。目标是在整个动作过程中保持她的身份一致,而不是复制驱动表演者的外观。请使用你获准使用的素材和肖像。

封面视觉图 — 可复制的生成提示词:

一张写实的杂志风格摄影作品:一名虚构女性,留着短款深色波波头,左侧太阳穴上方有一小缕白发,穿着朴素的铁锈色夹克,在有生活气息、铺着磨损木地板并洒入柔和窗边日光的排练室内完成一个克制的转身动作;她的脸清晰地映照在墙上的镜子中,现场没有其他人。强制摄影机要求:与视线齐平的中广角三分之四视图,16:9 横向画幅,自然的皮肤纹理,可信的运动感,不要文字、标志、屏幕或界面元素。

步骤 1 — 在选择驱动视频前锁定角色

在生成动态素材前,先制作一张三视图角色表。使用一套服装,并加入一些从不同角度看仍然容易识别的特征。对于 Mara 来说,身份锚点包括短款深色波波头、左侧太阳穴上方的一小缕白发、略圆的鼻子,以及带有朴素袖口的铁锈色夹克。让角色表保持中性:戏剧化的灯光可能会遮住你之后需要检查的关键特征。

角色表模板:

角色:Mara,虚构成年人
面部:略圆的鼻子;清晰的眉形;自然的皮肤纹理
头发:短款深色波波头;左侧太阳穴上方有一小缕白发
服装:朴素的铁锈色夹克、深色长裤、无标记鞋子
所有镜头固定不变:脸型、发际线、白发所在一侧、夹克颜色
允许变化:表情、身体姿势、摄影机角度、灯光
不得加入:珠宝、图案、标志、第二个人

视觉提示词 — 三视图身份表:

一张写实的三面板角色参考表,展示同一名虚构成年女性 Mara,穿着完全相同的朴素铁锈色夹克、深色长裤和无标记鞋子。她留着短款深色波波头,左侧太阳穴上方有一小缕白发,眉形清晰,鼻子略圆。强制布局:正好三个全身视图,分别位于独立且等大的面板中;左侧为正面,中间为真正的左侧面,右侧为背面;每个面板都保持相同的身高、身体比例、发型、白发位置和服装。强制摄影机要求:与视线齐平、类似正交投影的全身构图,均匀柔和的光线,中性浅灰色无缝背景,横向 16:9;不要文字、标签、标志、UI、其他人物或道具。

只有当侧面和背面视图与正面一致时,才批准这张角色表。如果白发换到了另一侧,现在就修正角色表,不要等到动作生成后再尝试修复。

Mara 的正面、左侧面和背面三视图参考表
Mara 的正面、左侧面和背面三视图参考表

步骤 2 — 选择参考图能够支持的动作

选择只有一名可见表演者、动作连续,并且光线足以看清身体姿势的驱动视频。双手都清晰可见的转身动作,比遮挡严重的动作更容易检查。如果你选择的工具允许,可以裁掉动作源中的无关人物;否则请选择更干净的视频片段。

生成前,在视频中标记三个时刻:正面朝向的起始姿势、转身中段的侧面姿势,以及正面或三分之四朝向的结束姿势。这些时刻将成为你的检查点。对于本例来说,单张正面肖像并不足够:Mara 角色表中的侧面视图会告诉你在转身中途应该呈现什么样子。

在投入制作前检查工具:确认其当前工作流能同时接受你计划使用的角色参考图和驱动动作输入。如果不能,请先生成与身份匹配的场景静帧,再使用受支持的动画工作流;不要以为仅凭文字提示词就能保持面部一致。

步骤 3 — 将动作与身份匹配的起始画面配对

根据已批准的角色表制作干净的起始画面。匹配驱动视频的初始身体朝向和构图,但保留 Mara 的面部、头发和服装。你可以使用 ai image generator 准备该画面,然后检查你选择的 image to video 工作流是否支持所需的动作输入。不同模型可用的控制项有所不同,因此请遵循所选模型的实际输入要求。

起始画面提示词:

使用已批准的三视图角色表作为 Mara 的身份参考。创建一张写实的单幅起始画面,场景位于有生活气息的排练室内。Mara 面向摄影机,以放松的站立姿势出现,右脚略微向前;双手清晰可见且彼此分开。保留她略圆的鼻子、短款深色波波头、左侧太阳穴上方的一小缕白发、朴素的铁锈色夹克、深色长裤和身体比例。强制摄影机要求:与视线齐平的中广角正面镜头,从头到鞋子全部可见,横向 16:9,柔和的窗边日光。只能有一个人;不要文字、标志、珠宝或多余的肢体。

视觉提示词 — 参考图到动作的联系表:

一张中性的摄影联系表,展示同一名虚构女性 Mara 在一段连续的排练室动作中相邻的三个电影感画面:左侧画面面向摄影机,右脚向前;中间画面处于转身中段,呈真正的左侧面;右侧画面以三分之四视角结束动作,并抬起右手。她的短款深色波波头、左侧太阳穴上方的一小缕白发、略圆的鼻子、朴素的铁锈色夹克、深色长裤和身体比例保持完全一致。强制布局:三个等大的 16:9 画面水平排列在一张横向图片中,画面之间留有整洁的间隔,不要说明文字或箭头。强制摄影机要求:固定的与视线齐平的中广角视图,一致的镜头和柔和窗边日光;写实的杂志风格,一间有真实生活感的排练室,不要文字、标志、UI 或其他人物。

将联系表视为目标序列,而不是模型会生成完美转身的证据。它的价值在于,所有检查视频的人都可以对照相同的三个姿势和身份锚点。

展示 Mara 转身开始、中段和结束状态的三个画面
展示 Mara 转身开始、中段和结束状态的三个画面

步骤 4 — 生成一段短片并检查转身

先只生成测试转身所需的动作。将身份指令与动作指令分开,这样对其中一项进行修正时,不会悄然改变另一项。

动作提示词:

身份:主体是已批准的角色表和起始画面中的 Mara。始终保持她的面部结构、左侧太阳穴的白色发缕、短款深色波波头、铁锈色夹克、深色长裤和身体比例。
动作:遵循授权驱动视频的节奏:向前迈步,向左转身,然后抬起右手。仅迁移动作姿势和时间节奏;不要采用驱动表演者的面部、头发、服装或身体形状。
场景:全程保持相同的排练室和柔和窗边日光。
摄影机:固定的与视线齐平的中广角视图;让主体始终完整处于画面内。
避免:其他人物、重复的面部、镜像后的白发位置、夹克颜色改变、手部消失,以及未经要求的摄影机切换。

检查开场画面、最明显的侧面画面、抬手画面和最后一帧。如果某个特征发生变化,请在这些节点之间暂停检查。如果你计划进行多镜头剪辑,还要比较这段视频的最后一帧与下一段视频的第一帧;单个片段表现良好,剪接后仍可能出现明显的不匹配。

步骤 5 — 修复具体的漂移,而不是全部重写

一次失败的转身并不总是需要重新设计角色。找出错误首次出现的画面,然后只修改能够解决问题的最小输入。

你看到的情况可能的薄弱点针对性修复
转身后,Mara 的脸变得像驱动表演者。外观指令和动作指令相互竞争。再次明确驱动视频只提供姿势和时间节奏;如果工具支持,请提供更清晰的侧面身份参考图。
白发换到了另一侧。侧面视图或镜像视图存在歧义。使用已批准的左侧面视图,并明确说明是从 Mara 自身视角看左侧太阳穴;检查所有镜像输入。
抬臂姿势中夹克发生变化。运动状态下的服装参考不完整。加入清晰的夹克和袖子参考;缩小动作幅度以进行诊断性渲染。
出现一只手或第二个人物。驱动视频中存在遮挡或歧义。选择更干净的单人表演视频,或缩短问题手势周围的片段。

视觉提示词 — 漂移与修正目标:

一张写实的并排插图对比,展示同一名虚构女性 Mara 在有生活气息的排练室内完成左转中途的状态。左侧面板展示连续性错误:她的一小缕白发错误地移到了右侧太阳穴,铁锈色夹克也变成了带图案的袖子。右侧面板展示修正后的目标:白发仍位于左侧太阳穴上方,袖子保持朴素的铁锈色,同时保留已批准的面部和身体比例。强制布局:两个等大的面板,中间以整洁的间隔分开,姿势、排练室和柔和日光完全相同;整体横向 16:9。强制摄影机要求:固定的与视线齐平的中广角真正左侧面视图;电影感杂志风格写实效果,不要说明文字、箭头、文字、标志、界面或其他人物。

该对比图用于说明需要检查的内容,并不表示这是某个特定工具的实际输出。如果同一缺陷再次出现,请测试其他可用模型,或在制作完整场景前缩小动作幅度。要使用已批准的角色表和提示词进行快速比较,免费试用这些模型。

白发反转与修正后角色的示意对比
白发反转与修正后角色的示意对比

常见问题

仅凭角色表就能让角色在视频中保持相同的面部吗?

角色表可以提供身份目标,但无法保证每一帧生成结果都一致。请根据已批准的角色表检查侧面视图、遮挡情况和最终呈现画面。

我应该使用驱动表演者的脸作为参考吗?

如果目标是将动作迁移给另一个虚构角色,就不应该这样做。应将动作源与角色身份参考分开,并为源视频取得适当的使用许可。

如果我的工具不同时接受角色图片和驱动视频,该怎么办?

不要仅靠文字强行完成工作流。请使用支持这些输入的工具,或者创建与身份匹配的关键帧,再使用工具实际提供的控制项为其制作动画。

最终检查清单

  • 在生成动作前,批准正面、侧面和背面角色表。
  • 使用经过授权、人物清晰可见且只有一名表演者的驱动视频。
  • 让起始画面匹配视频的开场姿势,但不要借用表演者的外观。
  • 检查侧面视图、抬起的手、结束画面,以及任何切换到下一镜头的部分。
  • 使用针对性的参考图或更短的片段,修复第一个明显的身份错误。

关键词

动作迁移 AI 视频、角色一致性、一致角色视频、角色参考、AI 角色设计、多镜头、让角色在视频中保持相同面部