网易首页 > 网易号 > 正文 申请入驻

世界模型走了一些弯路

0
分享至


「不如直接数字人

私以为,世界模型这个概念的发展经过了三个非常幽默的阶段。

第一阶段:硅谷真懂行的老登如杨立昆、李飞飞,觉得大语言模型在讲故事上没啥空间了,所以从学术圈拽了个新概念过来尝试弯道超车。

但老登们坏就坏在,都在那忙活自己的,也不把概念给统一了,因而导致了世界模型圈的礼乐崩坏。

第二阶段:一些做不好本职工作的视频模型厂独立思考了一下,觉得反正现在能实时生成就能叫世界模型,那我直接别做传统视频模型了,做实时生成视频模型,然后就声称自己是世界模型公司得了呗。

于是爱诗、快乐生蚝之流都把世界模型当配货给震撼首发了。

对吧,而且老百姓根本也不知道世界模型应该是啥样,谁先做出来哪怕是一坨也能抢占话语权。

第三阶段:有些邪恶的奋斗逼(如Vivix)开始给这种实时生成视频模型找应用场景了。

比如虚拟陪伴虚拟直播,所以别的蹭世界模型的公司也没法纯靠不明所以的demo骗钱了,都得开始假装思考消费者需求了,都得开始把自己包装成数字人公司了。

近几个月此类公司不约而同批量涌现啊。

比如最近大力炒作的10人00后团队猫薄荷(Catnip)做的缅因猫(MaineCoon),声称自己做了个「史上最快流式音视频社交模型」,我以为终于有个不炒世界模型概念的了。

结果点进官网一看,人家直接宣布自己发明了一种全新的世界模型——社交世界模型。


你们这么造词也太累了,以后直接叫第一世界模型、第二世界模型、第三世界模型得了。

我去查了下,猫薄荷这团队去年底还在做AI视频互动产品(这大概就是社交大模型这个词的来历),思考的还是怎么低成本获客,怎么今年趁着世界模型风摇身直接有训练模型能力了?

现在怎么拿开源框架做个后训练就说自己是世界模型,这风气到底谁开始带的?

造词还不是最封神的,它们还自己造了个基准测试叫SocialVideo Bench,然后自己拉了个榜单,宣布自己取得了第一名。


自己办比赛自己当裁判然后自己进球,建议男足学学,明年咱们也办场世界杯。

这招其实我们的好朋友也干过。

马卡龙花大力气搞的Macaron-V1-Preview,实际上是给GLM 5.1后训练加了5个Lora。刚好和他们跑的基准测试挨个对应。

然后下图马卡龙自己跑出来自己第一的4个Bench里,前两个都是马卡龙自己做的。


不知道该说啥了,AI应用转模型原来是这么一回事。

那歌怎么唱来着~听说你还在搞什么原创,搞来搞去好像也就这样~

不过也无所谓了。智谱现在这么火,纯做贴牌代工厂,给大客户搞GLM 5.2后训练不出意外能爆到大金币。你知道的,我们一直相信马卡龙很牛逼❤️

回到主角,我们直接来测测MaineCoon到底有没有东西。

MaineCoon现在主要有两个功能。首先是Instant Video,主打传统的AI视频生成,但特点是快。他们团队的人非常自信,直接在这个功能后面加了个Fast&SOTA的标识。


我用了一下确实特别快,生成一个20秒的视频,基本只需要8~9秒。可以说在Fast这个赛道确实SOTA了。

但在Fast之外,这些视频都不具备使用价值。

比如我输入了一段提示词:世界杯赛场上日本队和巴西队踢球,一个身穿蓝色球衣的日本队队员射门射进了,穿国旗衫的巴西守门员抱头痛哭,看台上穿和服的日本球迷一边跳舞一边庆祝。

成品如下⬇️

可以看出,MaineCoon属于塔可夫斯基入脑了,只会拍长镜头不会分镜,人物主体的动作也不会变化,基本只体现氛围感。

而且整个画面里只有主人公是相对清晰的,背景里的人物全都量子化了,不知道的以为三体人提前打来了,非常恐怖。

所以作为视频模型而言,MaineCoon没啥可聊的,就是比较快,但快也不能当饭吃。

但它还有第二个功能,也就是处于Beta阶段的流式视频生成。使用方法和之前测过的Pixverse、7verse差不多,先生成一个场景,然后通过输入提示词实时改变画面。


分为Control Mode和Chat Mode两个模式

Control Mode就是当导演,Chat Mode就是找陪聊。我先用Control Mode让它生成了一个外卖小哥跑外卖的场景,然后中途让车撞他、车主打他、警察逮捕他,最后一起吃饺子,成品如下⬇️

画面质量上,和视频生成的问题一样,全是量子人,全是粒子特效,有一种做梦的感觉。

反应速度上,输入一段指令后,也基本是在10秒左右之后对画面进行改变,和之前测过的世界模型差不多,中规中矩吧。

不过MaineCoon生成的世界里,角色还真有点逻辑上的一致性,会根据发生的事件改变之后场景、行为和语言。这确实比之前只有七秒记忆的世界模型强。

最后我又测了一下Chat Mode,让它生成一个年轻的狼人帅哥跟我谈恋爱,弥补某乙游下架某男主的遗憾。

结果大半夜差点把我吓晕啊⬇️

MaineCoon生成的角色不知道为啥,会持续缓慢地向屏幕这边凑,可能是想亲我。反正脸就越来越大,嘴巴越来越多,伊藤润二来了都得找个出马的压压惊。

但这确实是MaineCoon三个功能里最能想象到商业化应用场景的那个了:

Instant Video固然快,但Seedance也出mini了;

Control Mode比别的实时生成视频项目耐看,但这玩意真能助力具身或预测未来吗;

唯有Chat Mode,虽然生成的角色都快赶上恐怖片boss了,但万一有人的xp就不是人呢?

神了,这流式生成视频要不直接改名叫刘氏生成视频得了,反正都是跟刘宇抢业务。

当然矬子里拔大个,MaineCoon已经是最近这个赛道炒作得比较成功的了,让我们看看它的对手:


没错,伟大的生数在我们发完道歉信后,终于不研究什么龙虾人了,开始研究正经福瑞了。

这实时交互模型,放别人家肯定也直接叫世界模型了。但生数毕竟已经开始做物理向的世界模型Motus了,可能没必要在这也蹭蹭了。

我和他们放在首页的角色「狐妖玉宝」聊了一下,剪辑后的成品如下⬇️

生数这个比MaineCoon强的是,可以打开摄像头和屏幕里的角色面对面聊,不用打字,说话就行。

而且屏幕里的角色确实能看到你的动作,be like:


我问她这是几,她说是三

然而这种对用户的观测是需要通过指令触发的,比如我后来啥也不说,纯手舞足蹈了一会,姐们就一点反应都没有,跟个死人一样。

然后生数应该是为了避免像MaineCoon一样人物乱动吓到观众的情况,对角色做了硬性规定:原地站着不动,眼睛死死盯着用户。

所以当我要求她跳个舞的时候,她在那自己像念经一样喃喃自语:轻轻晃肩、转圈、摆动手臂……把提示词给朗诵出来了。

所以当我要求她转个圈的时候,她说:不行,因为我要一直看着你……

️️小姐姐在看着你Little sister is watching you ️️

我建议直接改名伪人模拟器上架Steam得了。

我觉得MaineCoon Chat Mode和Vidu S1作为虚拟陪伴产品最致命的问题有两个:

第一,10秒的延迟在视频生成这个赛道完全能当个卖点,但当用户的需求是唠嗑,就显得太前现代了。都谈人机恋了,谁能接受对面过了10秒才回复你啊?

第二,这俩产品的对话体验还是半双工,类似对讲机,你说一句她说一句,你打断她她也不闭嘴,完全就是小爱同学水平,非常不尊重用户。

不理解以上两点的可以给豆姐打个电话,纯聊日常话题的话,基本是秒听秒回,而且可以随时打断。

豆姐率先一步启动边说边监听的全双工模型了,而ChatGPT目前是支持中途打断的半双工,最近也开始内测全双工了,这是大势不可逆。

低延迟反应快的细糠吃多了,谁能受得了粗粮啊?

当然,MaineCoon Chat Mode、Vidu S1以及其他实时视频生成产品做不到这些也情有可原:除了处理音频信息之外,哥几个还得处理视频信息,什么口型啊什么人物动作啊都得纳入思考,耗时耗力耗token。

但真有必要吗?

你们现在做的这玩意,动也不动,转身也不会,场景也不变,本质上不就是数字人vtuber吗?

那何必走流式视频的技术路径呢,你们直接把钱投到AI 2.5D建模,做100个皮套,再把豆包的语音模型插进去,直接对口型不就完事了?

这使用体验绝对比现在这些世界模型好。

在类似路线上,字节有OmniHuman,快手有Kling-Avatar,蔡浩宇团队都整了个LPM 1.0骄傲地声称已达到全双工无限流水平,说明只要不硬贴世界模型大家都有美好的未来。

这世界模型本没有路,走的公司多了就有了一条弯路,然后创业者都开始走这条弯路,走着走着都忘了两点之间线段最短了。

可怜呐。

最后插播一条幽默新闻。

100年没有新消息的虎牙,最近突然开始搞AI,倒腾出一个叫VAM 1.0的数字人模型。

任谁都能看出来这是个些许过时的缓解焦虑用的向上汇报产品,但它仍然比那些流式生成的数字人有更强的观赏性和可用性。

那还能说啥呢,兄弟们回头是岸吧,骗投资人可以骗AI媒体小编也可以别把自己骗了。

如果真有AI陪伴理想,不如趁现在赶紧把公司卖了,买几台硅胶机器人,研究研究怎么把Grok装它们嘴里得了。

(本文封面由ChatGPT 生成,纯人工写作,顺便点个歌吧)

⬇️

欢迎订阅我们的Substack

funeralai.substack.com

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
苹果官网上架大量新东西!售价很猛

苹果官网上架大量新东西!售价很猛

花果科技
2026-09-16 22:33:51
3000亿江西特产全球疯抢!半年涨3倍,美国都急了

3000亿江西特产全球疯抢!半年涨3倍,美国都急了

环球零碳
2026-09-16 20:56:31
华为高层内部万字长文刷屏

华为高层内部万字长文刷屏

第一财经资讯
2026-09-16 00:33:30
阿信参加发布会、蒋万安妻子参加APEC相关活动:说到的中国

阿信参加发布会、蒋万安妻子参加APEC相关活动:说到的中国

新民周刊
2026-09-17 08:11:11
非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

叙说医疗健康
2026-07-25 06:00:22
乳企补税背后,“不溯及既往”正在失效

乳企补税背后,“不溯及既往”正在失效

墨心人
2026-09-15 11:18:59
13岁女儿说肚子里有东西在动,我带她去了医院,检查结果让我傻眼

13岁女儿说肚子里有东西在动,我带她去了医院,检查结果让我傻眼

千秋文化
2026-09-17 20:10:50
世界杯分组:中国女排落位H组,淘汰赛或迎战美加,冲奥机会来了

世界杯分组:中国女排落位H组,淘汰赛或迎战美加,冲奥机会来了

金毛爱女排
2026-09-17 00:00:11
1967年张治中写信请求“释放”彭总,却被周总理驳回:以后别写了!

1967年张治中写信请求“释放”彭总,却被周总理驳回:以后别写了!

凉州辞
2026-09-17 06:45:03
彻底废了!阿森纳 6300 万巨星沦为新津琴科!阿尔特塔或将清洗

彻底废了!阿森纳 6300 万巨星沦为新津琴科!阿尔特塔或将清洗

澜归序
2026-09-17 09:40:18
随着一场2-1险胜,死亡之组积分榜乱套了,国足无缘登顶!37岁老将包办全场射正!U23小将集体哑火,球迷心寒了

随着一场2-1险胜,死亡之组积分榜乱套了,国足无缘登顶!37岁老将包办全场射正!U23小将集体哑火,球迷心寒了

小七说篮球
2026-09-17 09:55:15
A股:今天跌到3875了,不出意料,明天周五可能这样走

A股:今天跌到3875了,不出意料,明天周五可能这样走

明心
2026-09-17 15:19:24
8天5个涨停板!股民:卖飞了太懊悔!

8天5个涨停板!股民:卖飞了太懊悔!

数据挖掘分析
2026-09-17 15:19:30
胡塞打进城,先给百姓发大米,难怪势如破竹,真给他们学到精髓了

胡塞打进城,先给百姓发大米,难怪势如破竹,真给他们学到精髓了

施涛说
2026-09-16 17:00:03
让我用行动证明,我是多么爱你!

让我用行动证明,我是多么爱你!

疾跑的小蜗牛
2026-09-17 20:21:35
不查不知道!原来他也出席敬一丹葬礼,央视一哥,65岁仍未婚无子

不查不知道!原来他也出席敬一丹葬礼,央视一哥,65岁仍未婚无子

萌眼探世界
2026-09-17 20:12:34
再也瞒不下去了!德国专家曾指出,中美之所以尚未爆发冲突,不是因为美国没本事,而是美国可能已经察觉到了形势的严峻

再也瞒不下去了!德国专家曾指出,中美之所以尚未爆发冲突,不是因为美国没本事,而是美国可能已经察觉到了形势的严峻

z千年历史老号
2026-09-14 17:23:40
不服就干!韩国打响反华第一枪,通告全球,妄想掐断中方退路?

不服就干!韩国打响反华第一枪,通告全球,妄想掐断中方退路?

影孖看世界
2026-09-16 22:38:51
最新进展:“景甜复工”引评论区很不满,景甜发图:易如反掌全能姐!

最新进展:“景甜复工”引评论区很不满,景甜发图:易如反掌全能姐!

默默有话说
2026-09-17 13:18:43
我们麻将馆有个30岁女人,她打麻将几乎没输过,而且从不跟女的打

我们麻将馆有个30岁女人,她打麻将几乎没输过,而且从不跟女的打

千秋文化
2026-09-17 20:07:55
2026-09-17 21:08:49
葬AI
葬AI
整点真实
155文章数 28关注度
往期回顾 全部

科技要闻

影视飓风Tim反掰iPhoneDuo被质疑

头条要闻

义乌开始卖"UFO"了:垂直起降可载1-2名乘客 售价80万

头条要闻

义乌开始卖"UFO"了:垂直起降可载1-2名乘客 售价80万

体育要闻

逆转朝鲜,国足亚运队“啃老”过关

娱乐要闻

rapper赵涛恋情曝光!带甜馨妈妈散步

财经要闻

缺钱的追觅 隐藏的债务?

汽车要闻

猛士X700内饰正式公开 华为技术加持打造家庭泛越野智能座舱

态度原创

家居
艺术
本地
旅游
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

深圳第二座机场,5张效果图透露新地标样貌!

本地新闻

不止胖东来!许昌藏着半部三国史

旅游要闻

【凝心聚力 真抓实干 奋力实现“十五五”良好开局】文旅重塑 宁夏打造国际旅游目的地

军事要闻

韩国外长表态:尚未决定是否向霍尔木兹海峡派兵

无障碍浏览 进入关怀版