网易首页 > 网易号 > 正文 申请入驻

如何用AI完全还原李小龙打斗,LibTV新功能提供终极答案

0
分享至

大家好,欢迎来到AI变革。

大伙儿,听说最近非常火爆的真人动作转AI角色玩法了吗?

我手里正好有一段二十秒的武术展示视频。

一个男运动员穿着红色练功服,在体育馆的台子上打了一整套,腾空飞脚,贴地扫堂腿,身体横着甩出去的旋子,连续的弓步冲拳,还有侧手翻,最后一拳定住,结尾镜头慢慢推到了近景。

动作密度非常高,属于那种你明知道厉害、但很难用嘴复述清楚的东西。

我想干的事听起来挺简单,让一只功夫片质感的3D熊猫,在一片竹林里,把这套动作一模一样地打一遍。

人换成熊猫,体育馆换成竹林,红色练功服和背景统统不要,只留下动作和镜头。

就这么个需求,我用老办法做,一直不满意,最后是靠LibTV刚上线的深度动作捕捉才真正跑通。

这篇我就把整个过程说明白。


这是我制作的熊猫。

先说这件事为什么难,难到我觉得值得专门写一篇。

你现在可以试着用文字把这套动作写清楚。

人要先压低、蹬地、拧腰,然后整个身体横着甩到空中,和地面平行,两条腿前后打开,再顺势转体落地。

你把这些写进提示词,模型理解的和地面平行可能是趴下去,拧腰甩出去可能是原地转个圈。

更别说这二十秒里有十几个动作咬在一起,动作之间怎么衔接、重心怎么换、第几秒腾空第几秒落地,文字根本承载不了。

这就是第一个痛点,复杂动态,尤其是这种带腾空、带转体、带地面技术的高难度动作,靠提示词几乎是描述不准的。

那直接上参考视频不就行了,这正是我一开始的做法。


直接进行参考生成。

然后我结结实实撞上了第二个痛点,参考视频是个打包货,它给你的从来不只是动作。

那段原片里,有太多的元素。

你把整段视频挂给模型,跟它说换成熊猫和竹林,模型并不会只取动作。

来看看你直接参考生成的效果。

乍一看感觉不错是吧,但你仔细去品,就会发现生成的视频和原视频的背景声音有重叠,尤其是原视频打拳时的喊声,全都复刻过来了,不符合角色的形象,还好是个拟人的男熊猫,不然更加违和。

还有就是动作节奏对不上,每个时间点都有问题。

我接下来用同一段武术原片,同一个视频模型,同一句提示词,同一套参数在LibTV里把原片过一遍深度动作捕捉,拿得到的深度动态节点当参考。

两组唯一的区别就是参考源。

我把那段武术视频传到画布上,点中这个视频节点,去顶部工具栏找逐帧拉片,在它的下拉菜单里找到深度动作捕捉。


点进去,选处理分辨率,再点生成。


画布上会多出一个新节点。


这就是原片的深度动态版本,一段偏单色的画面,你能清楚看到一个人形轮廓在里面跳跃、扫腿、横飞、出拳,但原来那张脸、红色练功服、蓝色台子、舞台灯光全被抹掉了,剩下的只有身体在三维空间里怎么运动。

我把它连到视频生成节点上。


相同的提示词进行生成。

来看一下效果。

连续弓步冲拳那段也有意思。

直接参考原视频的熊猫出拳时明显时间要晚了两秒。

参考深度动作捕捉的视频镜头推近,节奏和原片严丝合缝。

测到这儿,我把什么样的素材最该用深度动作捕捉总结一下。

一是空间感得强,人物要在画面里真的移动,有走位、有远近变化,站桩念台词那种用不上它。

二是动作幅度要大,最好带腾空、转体、下蹲、地面动作,越是文字写不出来的,它越值钱。

三是原片别用扁平动画,那种本身就没什么立体空间关系的画面,深度提取也提不出多少东西,真人写实、立体、有光影的素材才最合适。

之后我还要说一下LibTV这次一起更新的智能剪辑,我正好也一起测了一下。

和大家说,其实剪口播一直是我最烦的活。

找卡壳、去口水词和重复、重新排结构、再上花字字幕,没半个小时下不来。

我手头正好有个需要剪的例子,一个女主播做职场方向,五段十来秒的视频。

这5个视频里总有说错,有重复说的。

这次我直接在画布上加了个智能剪辑节点,选口播视频。


五段素材全部选上,已经配好了提示词。


它先把每段讲了什么理解一遍,自动粗剪。

五段零散素材一共有一分钟。

最后剪辑下来有38秒,说明有20多秒是不能用的。

字幕都给我配好了。

智能剪辑先把人最耗时间的那部分机械活替你干掉,把判断和创作留给你自己,简直太适合媒体人了。

测完我最大的感受是,AI视频这两年卷来卷去,明面上都在卷谁的画面更精致,可真正做内容的人,私底下最迫切的需求全是可控两个字。

我脑子里明明看得见这套武术该怎么打、镜头该怎么走,就是没法稳定地让AI照做,要么它听不懂我的文字,要么它顺手抄走我根本不想让它抄的东西。

深度动作捕捉真正打动我的,是它的可控,从控制一张画面长什么样,推进到控制动作、走位、运镜和空间关系。

动作其实是一段视频的骨架,长相、服装、场景、画风,都是挂在骨架上的皮肉。

以前你喂参考,是连皮带骨塞给它,它当然连皮肉一起抄。

现在你能先把骨架单独抽出来,皮肉想换成熊猫就换成熊猫,想放进竹林就放进竹林。

测完我发现,这才应该是参考视频本来应该有的效果。

地址我放在这了,https://www.liblib.tv/ ,逐帧拉片的下拉里就能找到深度动作捕捉。

真心建议你也找一段动作足够狠的视频,做一次自己想做的视频,亲自过一遍,你就明白我为什么愿意为它写这么长一篇文章了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中俄通婚越来越多,中国男人婚后傻眼!不少人为了面子娶个洋媳妇,结果日子越过越难受

中俄通婚越来越多,中国男人婚后傻眼!不少人为了面子娶个洋媳妇,结果日子越过越难受

扶苏聊历史
2026-10-30 15:16:48
“我们自愿有何罪”?三男三女聚众淫乱,三亚高知换妻游戏案始末

“我们自愿有何罪”?三男三女聚众淫乱,三亚高知换妻游戏案始末

易玄
2026-09-13 11:43:30
当支持俄罗斯,马斯克开始变得满嘴谎言

当支持俄罗斯,马斯克开始变得满嘴谎言

名人苟或
2026-11-03 07:06:01
惊天逆转 科技大反攻 明天重点

惊天逆转 科技大反攻 明天重点

趋势巡航
2026-11-04 15:00:55
辞去月薪2万的工作,小伙在杭州全职上门做饭!每小时70元,2小时起步,有客户需要每天去烧晚饭

辞去月薪2万的工作,小伙在杭州全职上门做饭!每小时70元,2小时起步,有客户需要每天去烧晚饭

极目新闻
2026-11-04 22:09:18
8岁女孩被同学以百米冲刺的速度撞至脑死亡!家长痛诉:事发1小时后孩子才被接上救护车,同学家长仅说过一句道歉,拿出1.7万元医药费后再无音信!

8岁女孩被同学以百米冲刺的速度撞至脑死亡!家长痛诉:事发1小时后孩子才被接上救护车,同学家长仅说过一句道歉,拿出1.7万元医药费后再无音信!

闪电新闻
2026-11-03 09:54:14
美国首个穆斯林联邦参议员出炉,民主党建制派丧钟

美国首个穆斯林联邦参议员出炉,民主党建制派丧钟

移光幻影
2026-11-04 16:40:27
一男子将3000万存银行,银行承诺3年利息为4%,每年120万利息,可第三年只给105万利息,还有15万元不给了,男子直接起诉,法院判了

一男子将3000万存银行,银行承诺3年利息为4%,每年120万利息,可第三年只给105万利息,还有15万元不给了,男子直接起诉,法院判了

LULU生活家
2026-10-24 14:40:06
从3年一次,到几乎绝迹,为什么我国会成为“蝗灾”绝缘体?

从3年一次,到几乎绝迹,为什么我国会成为“蝗灾”绝缘体?

兴趣知识
2026-11-04 05:06:18
环球时报快评:暗指中国“趁日本之危”,日防灾大臣请要点脸

环球时报快评:暗指中国“趁日本之危”,日防灾大臣请要点脸

环球网资讯
2026-11-04 17:34:49
张国焘南下搞分裂,为何不得不最后北上?朱老总起了关键作用

张国焘南下搞分裂,为何不得不最后北上?朱老总起了关键作用

天地
2025-04-21 07:06:19
张朝阳:账上12亿美元别老想着分红 搜狐还有一场仗要打

张朝阳:账上12亿美元别老想着分红 搜狐还有一场仗要打

快科技
2026-11-04 14:55:57
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
不忍直视!鸿蒙智行、赛力斯销量双双腰斩,被蔚来也反超了

不忍直视!鸿蒙智行、赛力斯销量双双腰斩,被蔚来也反超了

ZAKER新闻
2026-11-02 00:16:11
火箭表现完美仍然死穴!一位置阵容薄弱 能否在赛季中期补强

火箭表现完美仍然死穴!一位置阵容薄弱 能否在赛季中期补强

惊奇侃球
2026-11-04 22:20:41
投资人教练球员与女主播乱搞?已解散的中甲俱乐部深夜写诗 网友炸锅

投资人教练球员与女主播乱搞?已解散的中甲俱乐部深夜写诗 网友炸锅

念洲
2026-11-04 16:42:04
重庆市政府原参事赵江平被开除党籍

重庆市政府原参事赵江平被开除党籍

上观新闻
2026-11-04 19:20:50
麦卡利斯特:球队告知我不在续约计划内,但我仍想留下

麦卡利斯特:球队告知我不在续约计划内,但我仍想留下

懂球帝
2026-11-04 16:41:15
华为为什么把八十年理论变成塔上圆柱?

华为为什么把八十年理论变成塔上圆柱?

风铃草语
2026-11-04 07:15:22
珠海统筹千亿资源支持华发集团 已落地资金超400亿元

珠海统筹千亿资源支持华发集团 已落地资金超400亿元

观点机构
2026-11-04 21:57:10
2026-11-04 23:15:00
AI变革 incentive-icons
AI变革
AI时代的变革,无论你主不主动,都与你有关
165文章数 21关注度
往期回顾 全部

科技要闻

国行苹果AI上手实测:苦等两年,成色如何

头条要闻

快递小哥收到2万货到付款派件 刚送到门口掉头找警察

头条要闻

快递小哥收到2万货到付款派件 刚送到门口掉头找警察

体育要闻

老板豪言建队五年必夺冠 球员:保守了

娱乐要闻

甩掉周一围嫁富豪,童蕾今负债亿元,

财经要闻

苹果“躺赢”了英伟达

汽车要闻

省钱 它是认真的!银河星耀6EF每公里成本只要2毛

态度原创

亲子
艺术
数码
家居
公开课

亲子要闻

有点孝心,但不多!

艺术要闻

吴冠中《碧海松风》,树被海风吹得如驼背的老人

数码要闻

三星Galaxy T1运动耳机获美国FCC认证,预计明年初发布

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版