网易首页 > 网易号 > 正文 申请入驻

双榜第一!网易两款模型力压 OpenAI、谷歌,登顶Hugging Face

0
分享至

网易在全球 AI 开源社区交出重磅成果。近日,网易有道开源的子曰 Live 系列两款模型 —— 真流式语音识别模型 Confucius4‑R2T2、流式翻译模型Confucius4‑T3PO,先后登顶全球 AI 开源社区 Hugging Face 语音识别(ASR)、机器翻译两大细分 Trending 热榜,实现国产实时 AI 模型 “双登顶”。

在两个榜单中,OpenAI Whisper、Google、Meta等全球科技公司的相关模型也同时在列。网易此次连续拿下两个细分榜第一,也让中国团队在实时语音AI方向受到全球开发者集中关注。



图注:语音识别Trending榜,R2T2登顶(左);翻译Trending榜,T3PO登顶(右)

双榜登顶:全球开发者深度参与模型适配

登顶之后,网易两款开源模型很快获得开发者社区进一步响应。截至9月30日,Hugging Face页面显示,R2T2主模型近30天下载量超过1万次,T3PO主模型超过1300次;据相关数据统计,R2T2、T3PO及其官方GGUF版本近30天累计下载量已超过3万次。

开源之后,全球开发者不再只是简单下载模型权重,而是投入力量开展工程化适配。R2T2发布后,Hugging Face 官方主动搭建ZeroGPU在线Demo,提供免费算力降低测试门槛。海外开发者在纯C++音频推理框架audio.cpp 完成原生适配,不仅重新实现了Longest Stable Prefix流式状态机和稳定文本提交机制,还加入GGUF、本地实时麦克风识别和Streaming API等能力。



图注:Hugging Face上的ZeroGPU在线Demo

T3PO同样完成多档位GGUF量化适配,让140亿参数级实时翻译模型具备端侧部署条件。从在线体验、模型量化到原生Runtime适配,两款模型正在从Hugging Face上的开源模型,进一步进入开发者的实际开发工具链。

直击 Voice Agent 痛点:一套链路实现 “边说边听边译”

两款模型能够快速出圈,核心解决了实时语音交互领域两大技术难题。

R2T2 瞄准传统流式识别 “输出文字反复改写” 的行业顽疾。多数伪流式识别会随着后续音频修改已输出内容,普通字幕仅会出现文字闪烁,但对于需要执行指令的语音智能体,识别结果来回变动会造成大模型意图判断、工具调用出错。

依托最长稳定前缀机制,R2T2做到输出文本只增不改、落子无悔:模型判断音频信息足够可靠才提交结果,支持 80毫秒‑2 秒灵活流式输入。官方测试显示,R2T2 在保持接近离线 ASR 准确率的同时,平均识别延迟(平均说完每个字到识别出这个字的时间)约为 200 至 600 毫秒。

进一步的公开评测显示,在多个中英文测试集上,R2T2 相较 WhisperRT、Nemotron、Voxtral 等同类方案,在低延迟条件下保持了更优或具有竞争力的识别表现。这意味着,模型并非单纯追求 “更快出字”,而是在响应速度、识别准确率和输出稳定性之间取得平衡,也让下游大模型能够在用户尚未说完话时,提前获得稳定文本并开展后续处理。



图注:英文测试集质量和延迟结果对比 来源:github



图注:中文测试集质量和延迟结果对比 来源:github

T3PO则进一步解决实时翻译中“速度与质量”的平衡问题。模型将实时翻译建模为持续的READ/WRITE决策:当上下文信息不足时继续等待,当信息已经足够时立即输出译文,并通过Pareto-aware Policy Optimization(帕累托策略优化)同时优化翻译质量与等待延迟,在低延迟下接近离线翻译的效果,译文同样不回溯改写。

当R2T2与T3PO串联后,一条完整的实时翻译链路由此形成:语音持续进入R2T2,生成稳定增量文本;T3PO再基于这些文本持续判断并输出译文。AI语音交互也由传统的“说完—识别—翻译”,进一步向“边说—边听—边理解—边翻译”演进。

补齐实时 AI 技术底座,国产方案走向全球开源生态

此次双登顶,是网易有道 “子曰” 大模型矩阵持续迭代的重要里程碑。从2023年国内首个教育大模型发布开始,有道已经搭建起包含多模态推理、语音生成、实时识别、流式翻译的完整能力矩阵,打通 “说、听、理解、翻译” 全链条。

此次R2T2与T3PO分别补充实时语音识别和流式翻译能力,并通过开源进一步进入全球开发者生态。相关能力可应用于实时字幕、会议同传、直播翻译、AI客服和Voice Agent等场景。

行业普遍认为,AI正在从对话问答走向可感知、可执行任务的Voice Agent,稳定低时延的流式语音,正是智能体对接现实世界的关键底座。此次网易两款模型登顶Hugging Face,并获得全球开发者持续下载和工程适配,意味着网易实时AI技术正进一步进入全球开发者工具链和实际应用场景,也让中国团队更深地参与全球AI开源生态建设。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
王诗龄越来越漂亮了,颜值比妈妈年轻时还要高,果然是女大十八变

王诗龄越来越漂亮了,颜值比妈妈年轻时还要高,果然是女大十八变

可乐谈情感
2026-10-01 02:14:33
又一女间谍曝光!国安部发声,大量航天机密遭泄露,作案手段高超

又一女间谍曝光!国安部发声,大量航天机密遭泄露,作案手段高超

雨诺翛翛
2026-09-29 02:10:37
巴萨金童彻底陨落,22岁断崖下滑

巴萨金童彻底陨落,22岁断崖下滑

看我说体育
2026-09-28 08:19:56
亚运会第12日奖牌榜出炉,中国队单日4金为祖国庆生,日本夺9金韩国6金

亚运会第12日奖牌榜出炉,中国队单日4金为祖国庆生,日本夺9金韩国6金

球盲百小易
2026-10-02 01:26:15
13年前《非诚勿扰》,34岁北京小伙牵手51岁单亲妈妈,如今怎样了?

13年前《非诚勿扰》,34岁北京小伙牵手51岁单亲妈妈,如今怎样了?

代军哥哥谈娱乐
2026-09-30 13:23:24
加盟CBA被群嘲,前NBA明星拉塞尔加盟上海引争议,麦迪库克力挺!

加盟CBA被群嘲,前NBA明星拉塞尔加盟上海引争议,麦迪库克力挺!

体坛侃侃球
2026-10-02 00:05:22
出尽洋相还当顶流?央视怒批,广电总局出手整治!

出尽洋相还当顶流?央视怒批,广电总局出手整治!

潘殤旅行浪子
2026-09-30 18:52:51
男子将24岁女孩撞成高位截瘫,得知要赔200万,灵机一动将名下2套房过户给女儿,女孩去要钱,男子:要钱没有,要命一条!

男子将24岁女孩撞成高位截瘫,得知要赔200万,灵机一动将名下2套房过户给女儿,女孩去要钱,男子:要钱没有,要命一条!

大爱三湘
2026-04-28 19:39:24
万斯当众用粗口骂特朗普的新项目!就这嘴,以后哪还有政治前途?

万斯当众用粗口骂特朗普的新项目!就这嘴,以后哪还有政治前途?

最美的开始
2026-10-01 11:31:51
从一席难求到大规模倒闭:曾风靡全国的自助餐,为何没啥人去了?

从一席难求到大规模倒闭:曾风靡全国的自助餐,为何没啥人去了?

云居历史
2026-10-01 22:15:49
李小璐首谈遭受8年网暴:父亲为自己打了多场官司,全胜且赔偿金额巨大;当年“做头发”的梗与网传版本并不相同

李小璐首谈遭受8年网暴:父亲为自己打了多场官司,全胜且赔偿金额巨大;当年“做头发”的梗与网传版本并不相同

今古深日报
2026-08-03 10:33:17
画面曝光!俄军又又钻管道偷袭,被乌军逮个正着,数十人被坑杀!

画面曝光!俄军又又钻管道偷袭,被乌军逮个正着,数十人被坑杀!

军武次位面
2026-09-30 17:25:26
老郑州口中的炮院:校名换了又换,可 100 高炮还立在门前

老郑州口中的炮院:校名换了又换,可 100 高炮还立在门前

段方砖
2026-10-01 22:22:35
许家印的靠山,被起诉了

许家印的靠山,被起诉了

哲空空
2026-05-22 13:40:53
田永明今天被执行死刑 强奸大嫂出狱后又杀人

田永明今天被执行死刑 强奸大嫂出狱后又杀人

看看新闻Knews
2026-04-28 15:44:15
改革开放后三大耻辱,每一件都是民族伤疤

改革开放后三大耻辱,每一件都是民族伤疤

回京历史梦
2026-09-12 09:24:59
中越战争伤亡情况:解放军伤亡27000人,越南称6万人,三万去哪了

中越战争伤亡情况:解放军伤亡27000人,越南称6万人,三万去哪了

牛牛叨史
2025-02-21 15:44:06
Shams:猛龙3年2400万续约贾马尔-谢德,双方签约至2030年

Shams:猛龙3年2400万续约贾马尔-谢德,双方签约至2030年

懂球帝
2026-10-02 03:24:07
拉夫罗夫主动卸任,功成身退时机恰到好处,普京早已安排人选接任

拉夫罗夫主动卸任,功成身退时机恰到好处,普京早已安排人选接任

谛听骨语本尊
2026-10-01 16:50:14
恐怕连刘强东都没想到,如今32岁的章泽天,在何超琼的提携与支持下,竟迎来了自己的高光时刻

恐怕连刘强东都没想到,如今32岁的章泽天,在何超琼的提携与支持下,竟迎来了自己的高光时刻

人生录
2026-09-14 00:05:21
2026-10-02 05:28:49
网易 incentive-icons
网易
网聚人的力量
63文章数 12774关注度
往期回顾 全部

科技要闻

5999元起!华为Mate 90系列发布

头条要闻

桂林市文促会深夜发布致歉信:向阿丘诚恳致歉

头条要闻

桂林市文促会深夜发布致歉信:向阿丘诚恳致歉

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

家居
本地
手机
艺术
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

手机要闻

瑞银:iPhone18Pro系列等待期表现平平予苹果“中性”评级

艺术要闻

他历尽苦难,却画出最令人心碎的女人!艾斯特凡笔下的女性,美到不敢直视!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版