大模型 视频生成

想让自己的人物做出参考视频里的那套动作,怎么弄?

2026-11-01 约 7 分钟 45002 次阅读
一句话答案
在【视频】专区挑一款支持“动作迁移”这类玩法的视频模型,把动作来源放进【参考视频】卡槽、把你自己的人物形象放进【参考图片】卡槽,再设好【人物朝向】等参数提交即可。有哪些卡槽和参数,以你所选模型的参数面板实际显示为准。

想让自己的人物做出参考视频里的那套动作,怎么弄? 关键参数

玩法原理动作由【参考视频】提供(轨迹、姿态、节奏、手势、步伐、镜头运动),人物身份特征、脸部、发型、服装与体型由【参考图片】提供;与普通图生视频靠文字推演动作不同
找模型左侧列表切到【视频】分类,搜索框输入「动作」「换人」等关键词(匹配模型名与功能标签);简介写着「上传参考图像和动作视频」「让图片中的人物按照视频中的动作运动」的即为此类
素材要求参考视频:肢体头部露出不遮挡、尽量单人、一镜到底不切镜、动作平稳不太快,时长/格式/体积以卡槽提示为准;参考图片:清晰上半身或全身含头部四肢、比例与视频接近(半身配半身、全身配全身)、避免倒立平躺等极端姿势
参数与建议【人物朝向】可选【与视频一致】/【与图片一致】(时长上限不同);【生成模式】标准档试稿、高质量档成片;【保留原声】决定成片带原声还是静音;提示词只补氛围镜头背景,动作交给参考视频;先短后长、一次只改一个变量、人物比例先对齐

想让自己的人物做出参考视频里的那套动作,怎么弄?

手上有一段现成视频,里面的动作正是你想要的;同时你还有一张人物形象图,希望这个人物把那套动作照做一遍——这类用法一般被称作「动作控制」「动作捕捉」或「视频换人」。本文讲清怎么找到带这套能力的模型、两份素材分别怎么挑、参数怎么设,以及动作对不上时的调整办法。

它和普通图生视频的区别在于:普通图生视频靠文字描述动作,模型自己推演;而这里的动作直接由一段参考视频提供,人物的身份特征、脸部、发型、服装和体型则由参考图片提供,模型负责把两者对上。

需要先说明一点:这类能力由所选模型的参数配置驱动。有的视频模型带这套卡槽,有的不带;你在页面上看到什么卡槽和参数,就以什么为准。

一、第一步:在模型列表里找到支持这个玩法的模型

左侧模型列表先切到【视频】分类,再在上方搜索框里输入「动作」「换人」这类关键词。搜索会同时匹配模型名称和功能标签,带这类玩法的模型通常会被筛出来。

选中后先看一眼模型简介:写着「上传参考图像和动作视频」「让图片中的人物按照视频中的动作运动」之类描述的,就是你要找的这一类。具体有哪些可选、分别叫什么名字,以列表实际显示为准。

在模型列表中搜索动作类模型

二、第二步:备好两份素材,分别放进两个卡槽

选中模型后,输入区左侧会出现两个上传卡槽:

  • 【参考视频】= 动作来源。模型从这段视频里学动作轨迹、身体姿态、节奏、手势、步伐和镜头运动。
  • 【参考图片】= 要出镜的人物。模型从这张图里取人物的身份特征、脸部、发型、服装风格和体型比例。

输入框里的提示文字会写清当前模型要传什么,照着传即可。素材请使用你有权使用的内容;人物形象建议用你本人的形象,或你在站内自己生成的角色图。

参考视频与参考图片两个卡槽

1. 参考视频怎么挑

点击顶部【任务列表】右侧的灯泡按钮,可以打开当前模型的玩法说明,里面对素材有明确要求,大致是:

  • 人物的肢体和头部要露出来,避免遮挡;
  • 尽量上传单人动作视频,画面里人多时系统一般会自动选取占比最大的那一个;
  • 视频需要一镜到底,人物始终在画面中,避免中途切镜;
  • 动作不要太快,平稳的动作通常还原得更稳;
  • 时长、格式与体积上限,以卡槽提示和玩法说明里写的为准。

素材要求的玩法说明

2. 参考图片怎么挑

  • 人物露出清晰的上半身或全身,包含头部和四肢;
  • 人物比例尽量与参考视频里的人物接近,半身照配半身动作、全身照配全身动作通常更稳;
  • 避免倒立、平躺这类极端姿势,人物在画面里也别占得太小;
  • 真人风格、动漫角色、三维角色一般都可以用。

三、第三步:设好参数再提交

输入区能设的项目会随模型不同而变化,这类玩法常见的有以下几项(以你所选模型的面板实际显示为准):

  • 【人物朝向】:可选【与视频一致】或【与图片一致】。两者对应的可用视频时长上限不同,点开选项时面板里会写明,按你参考视频的实际长度来选。
  • 【生成模式】:通常分【标准模式】和更高质量的档位,高质量那一档在不同模型里的叫法并不统一,以你所在页面实际显示的名称为准。前期试稿先用标准档看动作对不对,方向定了再换高质量档重做。
  • 【保留原声】:选择保留,成片会带上参考视频里的声音;选择不保留,则输出静音画面,方便后期自己配音。
  • 提示词:写在输入框里,有的模型必填、有的可以留空。需要填时补充画面氛围、镜头或背景就够了,动作本身交给参考视频。

设置好后点击提交,任务进度和成片可以在顶部【任务列表】里查看。

人物朝向等参数设置

四、实用建议

  • 先短后长:先用较短的参考视频跑通一次,确认人物没跑偏、动作也对得上,再换长素材。
  • 一次只改一个变量:换了参考视频就先别动参数,这样出问题时容易判断是素材的事还是设置的事。
  • 人物比例先对齐:图片和视频的取景范围差得太多时,比较容易出现肢体拉伸或身材比例变化。
  • 成片比原视频短是常见情况:动作难度高或速度较快时,生成结果可能短于参考视频,这属于正常现象。

如果是想复刻爆款视频的运镜节奏并替换商品或人物主体,那是另一种玩法,可查阅 刷到爆款视频想做同款?用「全能参考」复刻动作与替换主体。

五、在 灵境 AI Model Hub(cloud-token.ai)上实践

灵境 AI Model Hub 是一个聚合 500+ 前沿大模型 的一站式 AI 平台,提供多模型对话、AI 写作与图像 / 视频 / 音乐生成,统一 OpenAI 兼容 API,支持免费试用。

  • 先短后长试:用短视频段先跑通一次,确认人物没跑偏再换长素材,省时也省算力;
  • 素材先对齐:图片取景范围与视频人物比例接近,能明显减少肢体拉伸;
  • 标准档定方向:先用标准模式确认动作,再切高质量档出成片,不把高规格花在试错上。

👉 立即免费体验 500+ 前沿大模型:灵境 AI Model Hub | cloud-token.ai 或 cloud-ai.link

六、常见疑问(FAQ)

Q:生成出来脸变了、衣服也变了,怎么办? A:多数情况下是参考图片给的信息不够。换一张人物更清晰、光线均匀、没有遮挡、取景范围与参考视频接近的图再试一次;如果所选模型还提供更高质量的生成档位,也可以切过去重做一遍。

Q:参考视频里有好几个人,能指定替换其中一个吗? A:一般不建议这么用。多人画面下系统通常会自动选取占比最大的那个人物,具体选谁一般不由你指定,以玩法说明里写的为准。想要结果稳定,尽量先剪出只有一个人出镜的片段再上传。

Q:我选的模型里没看到【参考视频】卡槽,是不是用不了? A:这只说明当前所选模型的参数里没有配这个卡槽。回到模型列表,按上面的关键词重新筛一款带这类玩法的模型再看即可——站内能力由各模型的参数配置驱动,页面上显示什么卡槽,就以什么为准。

Q:为什么成片比参考视频短? A:动作难度高或速度较快时,生成结果可能短于参考视频,这属于正常现象。想要更接近原长,换一段动作更平稳的参考视频,或按模型提供的时长上限重新选一版素材再试。


在 灵境 AI Model Hub | cloud-token.ai 或 cloud-ai.link 上,动作迁移类模型随手可筛,参考视频给动作、参考图片给人物,先短后长跑通再上成片规格。

参考来源

想让自己的人物做出参考视频里的那套动作,怎么弄?

常见问题

生成出来脸变了、衣服也变了,怎么办?
多数情况下是参考图片给的信息不够。换一张人物更清晰、光线均匀、没有遮挡、取景范围与参考视频接近的图再试一次;如果所选模型还提供更高质量的生成档位,也可以切过去重做一遍。
参考视频里有好几个人,能指定替换其中一个吗?
一般不建议这么用。多人画面下系统通常会自动选取占比最大的那个人物,具体选谁一般不由你指定,以玩法说明里写的为准。想要结果稳定,尽量先剪出只有一个人出镜的片段再上传。
我选的模型里没看到【参考视频】卡槽,是不是用不了?
这只说明当前所选模型的参数里没有配这个卡槽。回到模型列表,按上面的关键词重新筛一款带这类玩法的模型再看即可——站内能力由各模型的参数配置驱动,页面上显示什么卡槽,就以什么为准。
为什么成片比参考视频短?
动作难度高或速度较快时,生成结果可能短于参考视频,这属于正常现象。想要更接近原长,换一段动作更平稳的参考视频,或按模型提供的时长上限重新选一版素材再试。

相关阅读

配音音色怎么挑?语速情绪能调吗

音色库按通用、视频配音、角色扮演、多语种、客服、教育、有声阅读等场景分类,顶部可按男声/女声切换,每张卡片都能【试听】再决定:知识讲解选清晰沉稳男声或知性音色,故事旁白选温和有起伏女声,短视频选活泼卡通音色,出海内容选多语种音色。语速支持 0.5x~2.0x(带货短视频可 1.25x,朗读教学建议 1.0x),情感可选开心/悲伤/平静等并调强度,输出支持 MP3。建议先用 10~20 字短句试音再整篇合成。

AI 配音读错字、断句奇怪、该停的地方不停?怎么把停顿和读音调顺

配音念得别扭先改文本:补逗号句号分号破折号来制造停顿(补齐标点音频会变长,多出来的是停顿)、长复句拆成短句、要久停就换行;多音字换同义词、专有名词写成口语、英文缩写按读法写。再调参数:语速降一档改善「黏成一片」,情感/语调按需选。支持自然语言指令的模型可把「怎么说」写在文本开头「讲戏」。另附音色挑选与一次只改一处做对比的方法。

生成过的配音和音乐在哪找回来?下载、保存,以及拿到画布里继续用

音频找不到多半是切了模型:对话区与【任务列表】都只看当前模型,切回去就在;不分模型一起看去个人中心【我的作品】→【音频】(可按日期收窄、批量下载/导出链接)。卡片上可【下载音频】【复制下载链接】【加入资产库】,入库后在【合成】节点的【音频】位用【从资产库选择】挑回画布继续用(【音频输入】节点无此入口)。注意作品保留 1~15 天、附件类资产 30 天,长期素材下载到本地最稳。

一段录音或视频怎么转成文字?会议记录、访谈整理、做字幕

站内没有独立转写专区,录音或视频转文字在【聊天】页面做:选支持多模态的模型 → 点【上传】传入音视频文件 → 说明要逐字稿、会议纪要还是字幕格式。附三个可直接复制的提示词模板(逐字转写标 [听不清] / 会议纪要与待办提炼 / 字幕短句切分),以及人工核对要点、时间戳为估测值的说明与隐私合规提醒。

相关平台

关于大模型的选型、调用与落地实践,你还可以访问以下平台:

大模型视频生成动作迁移动作控制视频换人参考视频参考图片人物朝向