网易首页 > 网易号 > 正文 申请入驻

当小模型跑赢巨头:VibeThinker-3B是奇迹还是幻觉?

0
分享至

在“越大越好”几乎成为AI界铁律的今天,一家以社交媒体而非尖端技术闻名的公司,却投下了一颗震撼弹。

新浪微博的9人研究团队悄然发布了一篇论文,宣称其仅有30亿参数的模型VibeThinker-3B,在数学和代码推理能力上,竟能与谷歌、OpenAI及DeepSeek等巨头动辄千亿、万亿参数的旗舰模型分庭抗礼。

这一结果不仅让业界哗然,更将长久以来的“基准测试(Benchmark)崇拜”推上了审判台。这究竟是算法工程的重大突破,还是对早已失效的评分体系的最后一次嘲讽?

在LLM领域,小规模参数模型(通常指7B及以下)确实长期占据着“端侧部署”和“成本控制”的重要席位,但随着2025年GPT-5、Claude 4、Gemini 3等超大参数模型在推理能力上的断层式领先,以及API调用成本的骤降,大众开发者和舆论确实在近一年内将目光完全聚焦在了“大模型”身上,默认“更大即更强”,从而忽略了小模型本身的进化潜力。

正是在这种“大模型通吃”的集体潜意识下,微博VibeThinker-3B的横空出世才显得如此刺耳又迷人。它不仅打破了“小模型只能做简单任务”的刻板印象,更用一张逆天的成绩单,狠狠扇了盲目崇拜参数的行业一记耳光。



1.违背常理的分数:小模型的大能量

根据技术报告,VibeThinker-3B的成绩单堪称“逆天”。

数学推理:在极具挑战性的美国数学邀请赛(AIME 2026)中,它拿下了94.3分。这个分数与拥有6710亿参数的DeepSeek V3.2持平,甚至超过了谷歌Gemini 3 Pro(91.7分)。

代码能力:在LiveCodeBench v6测试中,其Pass@1得分达到80.2%;在2026年4月至5月的LeetCode实战周赛中,接受率高达96.1%,表现优于同期测试的大部分主流大模型。

为了直观理解这种差距:VibeThinker-3B的参数规模仅为DeepSeek V3的1/224,甚至可以在一台普通的消费级笔记本电脑上流畅运行。

研究人员将此称为“参数压缩-覆盖假说”:即数学推导和代码逻辑这类“可验证推理”能力,本质上是“参数密集型”的,可以被极度浓缩;而通用知识(如“谁当了总统”)才是“参数扩展性”的,需要庞大的参数来存储事实。



2.微博是如何做到的?4级训练流水线

VibeThinker-3B并非从零训练,而是基于阿里巴巴的Qwen2.5-Coder-3B进行后期训练(Post-training)。微博团队设计了一条精密的四级流水线,核心在于“频谱到信号原理”:

课程学习(Curriculum Learning):先喂“粗粮”(广泛的数学、代码数据),再喂“细粮”(精心筛选的高难度问题)。模型被强制丢弃简单的样本,只专注于解决那些它有75%概率会做错的难题。

强化学习(RL):采用自研的MGPO算法,像教练一样盯着运动员的短板。它不训练模型已经会的东西,也不训练它完全不会的东西,只训练“跳一跳够得着”的边界问题。

长短数学强化:引入零和奖励重分配机制,优先奖励更短的正确解题过程。这迫使模型去除啰嗦的“思考链”,学会像人类高手一样直觉性地给出高效解法。

蒸馏与指令微调:将大模型的解题思路(Teacher Traces)提炼出来,教给小模型,并进行最后的指令对齐。

这种极致的训练方式,让一个3B的小模型在推理效率上达到了极致。

3.基准测试的悖论:是突破还是“刷分”?

论文发布数小时内,Hugging Face上赞不绝口,但X(推特)上却充满了怀疑的电子烟味。

首先是基准污染与“Benchmaxxing”。

批评者指出,许多模型高分是因为“背题”。用户@Itsdotdev质问:“如果它在训练截止日期之前的老套题(如AIME)上获胜,那是泄漏;只有在截止日期之后的新题上获胜,才是真实力。”虽然微博团队声称使用了2026年4月后的LeetCode新题作为验证,且进行了严格的去污处理,但质疑声依然不断。

更有网友创造了新词“Benchmaxxing”,讽刺那些为了刷榜而牺牲实际能力的模型。用户@politilols实测后吐槽:“它甚至不知道什么是UV脚本(Python热门开发工具),这绝不可能反映真实的编码能力。”



第二,现实与榜单的割裂。

最尖锐的矛盾在于,榜单上的王者,在现实中却可能连基本的开发工具都搞不定。这种“基准分数与实际效用的巨大鸿沟”,正是VibeThinker-3B引发争论的核心。它证明了现有的基准测试可能已经无法衡量AI的真实生产力,而更像是一种“应试教育”的产物。

4.小模型的大影响:产业无法回避的问题

抛开争议,VibeThinker-3B的出现本身就具有里程碑意义。它来自一家社交媒体公司,而非传统的AI巨头,且团队仅有9人。这打破了“只有烧得起几亿美元电费的公司才能做前沿研究”的迷信。

一个启示是混合架构的未来。如果参数压缩假说成立,未来的AI系统将不再是单一的巨型模型,而是“混合专家+推理引擎”的架构。

一个30B的大模型负责提供知识和对话,旁边并行跑着一个3B的VibeThinker负责复杂的数学计算和代码生成。这将极大降低推理成本和延迟。

另一个则是端侧AI的黎明。用户@cmitsakis一针见血地指出:“小模型是Agent(智能体)的未来。”只有像VibeThinker-3B这样小巧、高效、专注推理的模型,才能在手机、汽车、IoT设备上本地运行,而无需时刻连接昂贵的云端算力。

VibeThinker-3B或许无法立刻取代Claude或GPT-4成为你的编程助手,但它撕开了一道口子。它逼迫整个行业思考:我们是否花了数十亿美元,在盲目堆砌参数的路上走得太远,却忽略了算法优化和训练策略的潜力?

最重要的测试不在任何排行榜上,而在每一个开发者的终端里。如果微博的这个小模型能让AI推理能力真正飞入寻常百姓家,那么无论基准分数如何,它都已经赢了。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
医生强调:一旦吃苯磺酸左旋氨氯地平的高血压的人,必须关注5点

医生强调:一旦吃苯磺酸左旋氨氯地平的高血压的人,必须关注5点

健康科普365
2026-09-14 09:21:27
卖豆浆的也开始吊带蕾丝、洗澡换丝袜!擦边广告失控了……

卖豆浆的也开始吊带蕾丝、洗澡换丝袜!擦边广告失控了……

柴狗夫斯基
2026-09-17 08:21:45
坏消息传来!“摸臀”女子高调宣布出国留学后,国外大学作出回应

坏消息传来!“摸臀”女子高调宣布出国留学后,国外大学作出回应

旧史新谭
2026-09-16 11:08:45
梅西获评9分+加冕MVP:冲顶破门+精准助攻,助迈阿密国际2-0夺冠

梅西获评9分+加冕MVP:冲顶破门+精准助攻,助迈阿密国际2-0夺冠

侧身凌空斩
2026-09-17 09:59:57
散热的比基尼,对高热量体态是刚需

散热的比基尼,对高热量体态是刚需

分享情感的梅梅
2026-09-01 09:47:06
菲律宾前总统杜特尔特首次在海牙出庭,出庭后发文:“我所做一切,皆为国家”,并附诗《不屈》;眉毛已变白,“频繁跌倒,且记忆力衰退”

菲律宾前总统杜特尔特首次在海牙出庭,出庭后发文:“我所做一切,皆为国家”,并附诗《不屈》;眉毛已变白,“频繁跌倒,且记忆力衰退”

大风新闻
2026-09-17 09:16:03
中秋节财运最旺的4个生肖:好局面悄悄降临,抓住就是赚到!

中秋节财运最旺的4个生肖:好局面悄悄降临,抓住就是赚到!

毅谈生肖
2026-09-17 11:20:12
罕见!苹果突然发布 iOS 27.2 新系统版本

罕见!苹果突然发布 iOS 27.2 新系统版本

XCiOS俱乐部
2026-09-17 05:53:18
尼克斯连签6名球员!怀斯曼布朗在列:最终只有1个留队名额?

尼克斯连签6名球员!怀斯曼布朗在列:最终只有1个留队名额?

罗说NBA
2026-09-17 06:24:35
新华社退休记者江山逝世,生前曾任中红网总编辑

新华社退休记者江山逝世,生前曾任中红网总编辑

澎湃新闻
2026-09-17 12:18:27
30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

30万斤堆积如山,树上6万斤无人问津,低价卖不动,农民满心无奈

三农雷哥
2026-09-05 12:16:13
光刻胶王炸!日本多家巨头10月1日将光刻胶最高提价38% !最新名单

光刻胶王炸!日本多家巨头10月1日将光刻胶最高提价38% !最新名单

牛锅巴小钒
2026-09-17 02:55:50
无锡市委常委、常务副市长王凯,拟履新!冯磊,拟提名省辖市政府副市长人选!

无锡市委常委、常务副市长王凯,拟履新!冯磊,拟提名省辖市政府副市长人选!

王姐懒人家常菜
2026-09-17 11:39:20
柏林议会瞬间哗然!那位通晓中文的女博士魏德尔当场抛出三个尖锐问题:若切断中德经贸往来,你们拿什么维持德国工人的生计?

柏林议会瞬间哗然!那位通晓中文的女博士魏德尔当场抛出三个尖锐问题:若切断中德经贸往来,你们拿什么维持德国工人的生计?

z千年历史老号
2026-09-16 18:35:04
男足险胜朝鲜!董路质疑安东尼奥:朝鲜要有赵松源 中国队得输糊涂

男足险胜朝鲜!董路质疑安东尼奥:朝鲜要有赵松源 中国队得输糊涂

风过乡
2026-09-17 08:07:02
国家卫健委主任:提倡大家多喝白开水、淡茶水

国家卫健委主任:提倡大家多喝白开水、淡茶水

北青网-北京青年报
2026-09-14 21:57:12
11岁夏洛特身高猛蹿!和凯特同框快齐平,网友:女王影子回来了

11岁夏洛特身高猛蹿!和凯特同框快齐平,网友:女王影子回来了

影视情报室
2026-09-16 19:12:31
惨淡!严重内卷,清华北大等毕业生扎堆中小学

惨淡!严重内卷,清华北大等毕业生扎堆中小学

史海流年号
2026-09-14 11:29:55
赵一鸣早该查了,4块5的红牛,喝的不是提神,是套路!

赵一鸣早该查了,4块5的红牛,喝的不是提神,是套路!

椰青美食分享
2026-09-14 11:20:34
13年过去,这部神剧最佳一集仍无人能超越

13年过去,这部神剧最佳一集仍无人能超越

自愈小日子
2026-09-17 07:18:14
2026-09-17 13:07:00
数据Wave incentive-icons
数据Wave
专注IT领域 洞察产业发展
1012文章数 767关注度
往期回顾 全部

科技要闻

赛力斯全面接盘,华为真的“撤”了吗?

头条要闻

牛弹琴:印巴军舰茫茫大海上罕见相撞 有三个疑点

头条要闻

牛弹琴:印巴军舰茫茫大海上罕见相撞 有三个疑点

体育要闻

逆转朝鲜,国足亚运队“啃老”过关

娱乐要闻

比起敬一丹的退而不休 章伟秋更显明智

财经要闻

缺钱的追觅 隐藏的债务?

汽车要闻

激光雷达+EVA机器人+爆胎稳行 星瑞L PLUS预售限时价11.57万起

态度原创

教育
数码
时尚
艺术
家居

教育要闻

2026出国留学院校推荐:不同条件,有哪些升学路径?

数码要闻

左右可拆还能合体!华硕推出影魔V2X分体键盘:搭载HFX V2X磁轴

8年没换过|| 每次“垮脸”都靠它救,这笔小投资已值回本

艺术要闻

16幅 罗中立奖学金获得者的作品

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版