网易首页 > 网易号 > 正文 申请入驻

对话半图创始人:融资千万美金,人类行为模型如何改变内容产业?

0
分享至


AI 3D,有人在卷建模绑定,但半图科技却想让3D角色动起来

来源 | FoST未来叙事

文 | 葱葱

2015年4月,《速度与激情7》上映,片尾用一曲婉转忧伤的《See you Again》纪念逝去的保罗·沃克。怀念之余,当“逝去”的保罗·沃克出现在大银幕上,几乎没有人不惊叹于数字人技术的成熟。 ㅤ

那个时候,邢骏还在香港读图形学博士,其中一个重要方向就是超写实数字人。一年后,邢骏奔赴南加州大学创意技术研究所(ICT)做博士后研究。南加州ICT是好莱坞「早期数字人技术重镇」,保罗沃克数字人的制作正是在这所研究中心完成。ㅤ


《速度与激情7》里的数字人 保罗·沃克

几年后,GPT3.0推动AI进入一个新的时代。邢骏看到技术变革的机会,选择从米哈游离开投身创业浪潮,成立半图科技(SemiGraph)。ㅤ

在米哈游,邢骏担任“逆熵”的AI研究负责人,负责了数字人“鹿鸣”多项AI技术的研发和落地,鹿鸣在B站拥有160多万粉丝。 ㅤ

2024年,在没有任何产品的情况下,半图科技拿到了IDG的独家投资。一年多后,半图科技完成新一轮超千万美元融资。邢骏告诉我们,公司目前也在启动新一轮融资。ㅤ

成立几年间,半图科技做了哪些事情,凭什么在没有任何产品时就拿到IDG的千万投资?他们主打的人类行为模型究竟是什么?未来,他们还将做哪些研究,推动内容产业发生怎样的变革。 ㅤ

带着这些问题,我们与半图科技创始人邢骏和联合创始人段金玖做了一次深度交流。ㅤ


半图科技创始人邢骏

01 AI 3D模型竞争白热化,半图科技已经瞄准下一个时代

说到“数字人”,大家会想到当下激烈的AI 3D模型竞争。仅仅半年时间,VAST、Meshy、影眸三家就从资本市场吸纳了超过80亿元人民币。 ㅤ

AI 3D的公司,更多强调的是建模能力。但在不远的未来,如何让这些静态的3D模型动起来,或许会成为下一个行业的角逐点。

近年来,学术界对相关方向也愈加重视。2026年7月,计算机图形学顶会Siggraph公布时间检验奖,这个奖项专门表彰过去十年间,持续对行业产生重大而持久影响的论文。 ㅤ

今年,香港大学计算机科学系教授Taku Komura与团队成员的论文《A Deep Learning Framework for Character Motion Synthesis and Editing》获得殊荣。 ㅤ

在这篇论文中,Taku Komura与团队首次使用深度学习从人类动作数据中学习人类运动的内在结构,再通过指令生成自然的人形角色动作。 ㅤ

这也是半图科技的人类行为模型在研究的方向。 ㅤ

尽管还没有正式上线一款产品,半图科技却已经将部分技术封装服务于部分B端企业,这背后,是他们做的人类行为模型已经初见成效。ㅤ

在交流中,半图科技创始人邢骏数次提到极致,他希望能够让3D角色真正的“活”起来,与人类进行极致的自然互动,半图科技希望把互动里所有的行为、表情、举动都做到非常极致。ㅤ

邢骏本科就读于中国科学技术大学,博士在香港大学,曾赴美国南加州大学ICT研究院从事博士后研究。回国后,他在米哈游担任「逆熵」AI研究负责人,用AI驱动颇受欢迎的虚拟人偶像“鹿鸣”,是一个真正懂AI互动的技术大牛。 ㅤ

除了技术基因,半图科技从创业开始,就自带商业化基因。ㅤ

半图科技的联合创始人段金玖,则拥有多年IP内容产业的创业和工作经历。

十年前,他参与过网络漫画《十万个冷笑话》的营销。2019年,段金玖参与创立波粒子科技,作为核心人员参与了公司核心产品,虚拟社交娱乐App“Vyou微你”的运营工作。2022年,波粒子被字节收购,段金玖随其加入字节跳动。 ㅤ

在字节,段金玖深度研究了A-SOUL虚拟偶像项目。A-SOUL是字节跳动、乐华娱乐打造的虚拟偶像女团。在两周年直播中,A-SOUL人气值从一开播就保持1000万+,创B站直播新纪录。ㅤ


A-SOUL的五名成员

但GPT-3的出现也让段金玖意识到,要想使(A-SOUL这样的虚拟人)达成真正意义上的产品化和标准化,让所有人体验,实现更好的商业化,AI是唯一的路。 ㅤ

一个技术大拿,一个内容与IP领域的资深从业者,二人顺理成章搭档,一起瞄向了下一个时代的数字人体验产品。 ㅤ

但让数字角色从“像人”走到“是人”并不容易。为了实现这个目标,半图科技提出:ㅤ

要做这个区别于以往的模型——人类行为模型。这个模型,实际上提供了一种拥有驱动3D角色能力的模型。ㅤ

在学术界,3D动画生成的研究已经有很多年。但核心问题在于,能不能像大模型一样,随着数据累计到一定的规模,模型效果实现质的变化,达到极致的互动体验。ㅤ

过去的动捕技术用技术手段记录人类演员的动作,并将其转换为数字模型的动作,并生成二维或三维动画。但这基本是影视或游戏制作者针对特定场景专门定制的有限场景。 ㅤ

半图科技要做的是通过对更大量数据的训练,最终获得一种能力,驱动骨骼的旋转、运动、跳舞等等不同的动作。ㅤ

半图科技试图通过引擎去驱动一个3D角色,半图科技把这种驱动能力称作行为。更简单地说,半图科技所做的模型可以看作一个行为生成模型:3D骨骼在时间序列上运动。 ㅤ

关于人,邢骏说: ㅤ

无论身材高矮和比例如何,套的是虚拟的“皮”,还是物理的“皮”,只要这个形态是一个类人的形态,其行为抽象来说都是一致的。 ㅤ

那什么是人类行为模型呢?它其实就是一个“让3D角色动起来、跳舞、做手势”的模型。邢骏向我们进一步做了如下解释: ㅤ

视频模型能生成出来的最多是某种类型的舞蹈,但视频是一种像素,它没有驱动能力,你不能让这个视频去驱动一个3D角色或者机器人。这需要一个专门处理“动作”的模型,这个模型就是人类行为模型。 ㅤ


半图科技借助AI生成的互动动画

但这里面有一个问题,相比文本数据和视频数据,互联网上可用的3D数据实在太匮乏了。为了解决这个问题,邢骏带着团队突破了一项核心技术,从2D视频提取高质量3D动画数据。ㅤ

通过自研的技术能力,半图科技获得了足够的独特数据集,并且持续进行训练,以期实现虚拟角色和人物的极致互动体验。在这个方向上,他们已经取得了阶段性的成绩。

对于人类行为模型目前的水平。邢骏说,他们并没有去做量化评估,但从一些细节(比如脚滑不滑,手指动画是否精细,身体接触是否准确)来看,已经实现了阶段性突破。

在邢骏看来,他们已经来到了3D动画生成的“GPT时刻”。至于它为什么没那么轰动,一个原因或许是,这本身是一个比较细分的领域,现在主要还是应用于游戏等产业。

但这并不等于这件事不重要,随着互动需求的爆发,未来某一天,它或许会迎来全面爆发,被应用于不同行业。又或者,如果每个人都能做3D内容,更多人就会理解这种能力的需求。

02 用一个虚拟人项目,验证自己的技术路线

当技术初见成效,拿什么向外界展示?邢骏和段金玖选择了他们最熟悉的3D虚拟人。ㅤ

2025年下半年,随着产品负责人、研发负责人等核心人员的加入,半图科技才开始规划商业化产品《代号Live》。邢骏强调:ㅤ

做好这个产品并不容易。除了技术过硬外,产品对美术和内容的能力要求也非常高。 ㅤ

技术决定能不能驱动好表情、声音等;美术决定形象是否够好看,能满足用户期待;内容则决定了表演互动是不是有趣,足够贴近用户需求。 ㅤ

从体验来讲,《代号Live》是一款AI角色养成类游戏。不过,它目前还未上线。邢骏预计,2027年暑期,《代号Live》将面向全球同步上线。至于它以什么样的方式上线,邢骏表示会首先在移动端上线,未来有多端规划,覆盖更多的用户使用场景。ㅤ

不过,三个月前,半图科技在B站首发了《代号Live》产品玩法PV,用1分钟呈现它的基本玩法。 ㅤ


《代号Live》产品展示,虚拟人Ria在直播间互动

相比过去数字人的单向互动,《代号Live》里的虚拟人Ria会主动互动并且拥有记忆力,用户的每一个选择,都会影响Ria后续的日程和表现。 ㅤ


虚拟人一对一互动体验演示

玩法上,从放出来的演示视频看,《代号Live》的角色会有自己的日常生活和日程安排,玩家可以去安排它进行互动,包括聊天、看表演、送礼物等。玩家在观看角色直播的同时也可以发弹幕、送礼物。 ㅤ

关于名字,段金玖特别做了解释。他说:ㅤ

Live是一个生命体,我们希望AI能完全扮演一个人和生命体的角色。 ㅤ

Live也有实时互动概念存在,很多人物的交互都是通过模型控制,实时生成。我们希望它能有一些跟直播(Live)相关的比较新颖的玩法和互动模式。 ㅤ

作为半图科技的第一款产品,邢骏认为进展还是比较符合预期的,但其中不免也会有一些挑战。做这么一款高度依赖于技术的产品,并且这个技术还处于相对早期,这本身就是一件创新、综合且很有挑战的事情。ㅤ

这个过程中,技术上肯定有很多问题,它里面涉及的AI模态很多,大模型、语音、表情动画,涉及的领域太多了。如果调API,串起来不是那么回事,还真得自己一点点做。 ㅤ

从技术适配上来讲,更多也是体现在数据层面。角色要做什么风格,就要有相关的数据作为训练基础。在这个层面,半图科技内部也有自己的演员和棚,能够针对性采集数据。 ㅤ

当然,从一开始,半图科技在做人类行为模型的时候,就从数据和模型层面一定程度上保证了它的适配性。 ㅤ

另外一个难题是,在性能上,算力并发量能不能支持实时性。

因为(算力)管道本身比较长,模态比较多,怎么保证延迟性较好的情况下,达到一个比较高的并发量,这就需要去算一个成本账。邢骏认为,在成本没有过高的情况下,很多驱动的工作还是要做。 ㅤ

邢骏告诉我们: ㅤ

《代号Live》除了商业化上的考虑,与技术的相辅相成也是非常重要的原因。 ㅤ

产品给我们的数据和技术提供了一个验证平台和数据飞轮的入口。因为我们跟用户互动的话,能持续不断地收获反馈,能够去迭代技术。

03 用技术,推动实时互动内容体验的到来

《代号Live》还没有上线,但半图科技的不少核心技术已经得到企业端的认可,并获得了一定规模的应用。 ㅤ

比如,通过提示词生成3D行为数据的能力已经被部分B端客户使用,这是一件自然而然的事情。目前,半图科技也在探索将行为生成、Agent能力封装为API对外提供服务。 ㅤ

但邢骏也告诉我们:ㅤ

当时,在跑通能力的过程中,我们并没有把技术服务作为重点能力来考虑,主要看中的还是互动娱乐的方向。

它绑定的东西很多,内容、定制化这些其实都是比较麻烦的,不适合开放给合作伙伴直接使用。 ㅤ

只有当这个东西形成一种通用能力,它能够做成一种ToC或AI的API的能力以后,我们才去做这个事。ㅤ

而在几个月前,邢骏发现,随着技术逐渐产品化,在与同行的交流中,也得到了关于技术应用的非常正向的反馈。所以半图科技正式决定将这些技术做成一种通用能力,以Infra或者API的方式对外提供服务。

从游戏公司,到具身行业,邢骏发现他们的核心技术其实也很通用,可以做得更有想象力,特别是3D发展到当下的阶段,整个行业都到了拐点的时候。ㅤ

数据需求是一方面,一些企业需要进行一些人类行为预训练,肯定也需要3D动画。ㅤ

邢骏这样说。但另一方面,邢骏一再向我们强调,公司会专注自身模型的迭代,采用同一套模型和技术能力,针对互动娱乐场景和技术服务两个方向分别推进。ㅤ

邢骏在对话中,多次提到了他想象的未来世界。

科幻电影《她》里,男主角通过声音与人工智能助手萨曼莎交流,并建立了亲密关系。《银翼杀手2049》里,乔伊则以全息影像出现,让虚拟伴侣有了可见的形象。


《银翼杀手2049》里的乔伊

这样的交流和陪伴式成长体验,是邢骏所期待的未来。对于公司的愿景,邢骏希望做一家提供极致和通用的互动体验的公司。他说,这个愿景里有两个关键词:极致和通用。


《代号Live》的B站账号

极致,意味着,包括美术、内容、技术一整个的互动体验都要做得够深。《代号Live》就是半图科技深度打磨的一个平台,半图科技希望通过这样一款产品,推动互动技术达到沉浸式的极致内容体验。 ㅤ

通用,是说半图科技同时关注不同行业对这种互动能力的需求,从虚拟的游戏世界,到真实的物理世界。具身智能是一个具象化的3D角色,它是在物理世界,但实际需要的驱动能力是一样的。ㅤ

在谈及竞争力时,邢骏说,当前,动画数据在市面上仍然比较稀缺。无论是AI大厂,还是游戏公司,都不具备海量的高质量动画数据。很多大公司在探索3D白模作为控制信号,驱动视频大模型的生成。在他看来:ㅤ

从AI视频到3D白模,这是一个明显的技术趋势。它表明,3D和2D在走向一个趋同。3D在把这种驱动能力,控制能力,进行一个显性结构化表达,然后去驱动视频模型。

从2D的像素呈现,到3D的立体展现,未来都会存在互动的双向需求。邢骏和半图科技希望成为3D领域的底层技术提供者,在驱动这种模态上做到最极致、最通用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
CBA最新消息!曝利文斯顿加盟广东宏远,辽宁男篮留用爱德华兹

CBA最新消息!曝利文斯顿加盟广东宏远,辽宁男篮留用爱德华兹

体坛瞎白话
2026-11-15 16:00:49
无言的挣扎,一个五六千工资的前台岗位,半个月就收到两百份大学生简历,老板却只想招初高中生,说“大学生来干啥”。

无言的挣扎,一个五六千工资的前台岗位,半个月就收到两百份大学生简历,老板却只想招初高中生,说“大学生来干啥”。

捣蛋窝
2026-11-15 11:06:50
后C罗时代首战!葡萄牙主场1-4崩盘 创16年耻辱 72岁新帅上任首败

后C罗时代首战!葡萄牙主场1-4崩盘 创16年耻辱 72岁新帅上任首败

我爱英超
2026-11-15 06:31:53
新婚才4个月,知名港星官宣离婚!曝丈夫家中断水、安装摄像头

新婚才4个月,知名港星官宣离婚!曝丈夫家中断水、安装摄像头

小椰的奶奶
2026-11-14 16:51:34
10元猪肉冒充30多元“牛肉”!顾客一句问价,牵出百万造假案→

10元猪肉冒充30多元“牛肉”!顾客一句问价,牵出百万造假案→

极目新闻
2026-11-14 20:50:08
被夹住的飞船,离再次起飞还差一万八千块隔热瓦

被夹住的飞船,离再次起飞还差一万八千块隔热瓦

普陀动物世界
2026-11-15 15:59:33
黄仁勋曾言:美国建造数据中心要三年,中国建造医院只要一个周末

黄仁勋曾言:美国建造数据中心要三年,中国建造医院只要一个周末

互联鱼
2026-10-16 15:48:10
掘金送鹈鹕6连败:约基奇26+8+10穆雷23+7+9 创历史第一纪录

掘金送鹈鹕6连败:约基奇26+8+10穆雷23+7+9 创历史第一纪录

醉卧浮生
2026-11-15 10:35:13
明年将会是中华人民共和国全党、全军、全国各族人民重要的一年

明年将会是中华人民共和国全党、全军、全国各族人民重要的一年

只能离开
2026-11-12 14:35:33
2000多万粉丝博主“深夜徐老师”宣布怀孕,去年5月结婚,其丈夫曾被调侃为“全网嫁得最好的男人”

2000多万粉丝博主“深夜徐老师”宣布怀孕,去年5月结婚,其丈夫曾被调侃为“全网嫁得最好的男人”

都市快报橙柿互动
2026-11-14 02:08:46
德国军方:禁止比亚迪、吉利、蔚来进入军营,大疆无人机同步被清退

德国军方:禁止比亚迪、吉利、蔚来进入军营,大疆无人机同步被清退

闪亮的车
2026-11-13 12:16:55
巴黎世家绳索装,不得不说这时尚我真不懂啊

巴黎世家绳索装,不得不说这时尚我真不懂啊

娱你同欢
2026-10-31 16:06:50
贝帅赢得首胜!广东“新锋线”打出身价,这可是近10年内最强天赋

贝帅赢得首胜!广东“新锋线”打出身价,这可是近10年内最强天赋

绯雨儿
2026-11-15 13:32:38
木原美悠-平野美宇女双夺冠,三个月内4次配对,女双夺冠率100%

木原美悠-平野美宇女双夺冠,三个月内4次配对,女双夺冠率100%

雅儿姐在遛弯
2026-11-15 22:12:44
网传物业费会成为压死失业人群的最后一根稻草…

网传物业费会成为压死失业人群的最后一根稻草…

慧翔百科
2026-11-12 11:33:59
SpaceX首次完成“筷子夹飞船”,和之前的“筷子夹火箭”有何不同?有何重要意义?

SpaceX首次完成“筷子夹飞船”,和之前的“筷子夹火箭”有何不同?有何重要意义?

之乎者也小鱼儿
2026-11-15 10:32:14
101岁张学良:我的钱不会捐给中国,6亿美金全部捐献出去了!

101岁张学良:我的钱不会捐给中国,6亿美金全部捐献出去了!

雍亲王府
2026-11-03 07:25:14
1927年4月,邓颖超在广州产下一子,由于这个孩子生下来体重太大,近十斤重,超过了正常标准,导致无法正常顺产出来

1927年4月,邓颖超在广州产下一子,由于这个孩子生下来体重太大,近十斤重,超过了正常标准,导致无法正常顺产出来

回京历史梦
2026-11-13 10:28:05
大批斗升级!欧美各大媒体疯狂怒批黄仁勋,一副要批倒批臭的势头

大批斗升级!欧美各大媒体疯狂怒批黄仁勋,一副要批倒批臭的势头

小徐讲八卦
2026-11-15 17:39:12
警校退学潮:比考不上更可怕的事,考上了你才发现根本不合适

警校退学潮:比考不上更可怕的事,考上了你才发现根本不合适

糖逗在娱乐
2026-11-02 06:31:49
2026-11-15 23:19:00
FoST未来叙事
FoST未来叙事
Future of storytelling 科技重构叙事
5文章数 0关注度
往期回顾 全部

科技要闻

历史头一回!马斯克用"筷子"夹住太空飞船

头条要闻

客人要求用百元大钞做“现金花束” 花店直接报警

头条要闻

客人要求用百元大钞做“现金花束” 花店直接报警

体育要闻

马刺破勇士:文班与库里各自的价值

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

英伟达、字节、谷歌,涌入"救命"的生意

汽车要闻

更豪华更好开 问界新M8细节升级见真章

态度原创

健康
游戏
时尚
手机
军事航空

情绪真能让健康人"伤心至死"?

飞燕群岛:新IP城市街区风格 有大量可自由进出房屋

“小棕裙”今年冬天爆火,这样穿时髦又松弛!

手机要闻

鞠婧祎代言 荣耀700系列四款高颜值配色公布:全系标配原生AI背屏

军事要闻

乌克兰一夜之间向俄罗斯发射近1200架无人机

无障碍浏览 进入关怀版