网易首页 > 网易号 > 正文 申请入驻

能聊天能办事 千问发布Qwen-Audio-3.0-Realtime

0
分享至

今天,千问正式发布实时语音交互对话模型Qwen-Audio-3.0-Realtime——一个既要毫秒级响应、又不牺牲推理深度的实时语音模型。它在智商、Agent工具调用、共情对话、双工交互流畅度四条主线上同步升级,力求"又快又聪明"。模型提供推理更强的Plus版本与速度更快的Flash版本,适用于智能客服、教育培训、娱乐互动与情感陪伴等场景。

欢迎体验

阿里云百炼:

Qwen-Audio-3.0-Realtime-Plus:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr#/model-market/detail/qwen-audio-3.0-realtime-plus?serviceSite=asia-pacific-china

Qwen-Audio-3.0-Realtime-Flash:

https://bailian.console.aliyun.com/cn-beijing/?spm=a2c4g.11186623.0.0.4ab7695bvInrXr&tab=model#/model-market/detail/qwen-audio-3.0-realtime-flash?serviceSite=asia-pacific-china

又快又聪明:压时延不掉智商

实时语音模型往往为压低时延牺牲推理深度,智商衰减,但Qwen-Audio-3.0-Realtime针对日常对话、简单问答等对时延敏感的场景,能够直接生成回复,毫秒级响应。

在考验“AI会不会答”的语音问答基准VoiceBench 上,以书面化的标准prompt和口语化的prompt提问,Plus版本得分分别为92.5和90.5,仅下降2.0,这意味着模型能扛住真人说话的随意性。在更难的多轮音频对话挑战AudioMultiChallenge基准测试中,Flash版本标准和口语化prompt得分分别为43.6和38.1,仅下降5.5。

今年5月,Preview版本Fun-Realtime-Audiochat在"语音推理能力"指标上曾以97.6% 登顶Artificial Analysis。


能聊天更能办事:

无需明确指令,自行调用工具

文本大模型的Agent能力已相当成熟,但语音模型往往"能聊天不能办事":需要用户明显说出"帮我打开 XX"才能触发工具,并且切回闲聊后容易出现上下文断裂。Qwen-Audio-3.0-Realtime无需明确指令即可自行调用外部工具——调用结果还会自动融入对话记忆,一次调用的结果会被记住,后面几轮追问都能接着用。

例如用户先问"附近有什么川菜馆",再追问"评分4.5以上的哪家最近",模型会自动衔接地图工具上一次的返回结果继续检索。

模型基于FunctionCall标准协议,可以完成MCP、API、知识库的引入。

摆脱机械感:

随语境调整语气、节奏与情感

共情对话是本版本最能改变用户主观体验的部分。Qwen-Audio-3.0-Realtime摆脱了传统语音助手的机械感,可根据对话语境动态调整语气、节奏、音调与情感。在辩论场景中,模型能准确抓取对方论点并快速组织反驳,同时保持恰当的语气强度;在情感陪伴中,则通过语调、节奏与笑声、叹息、犹豫等副语言信号进行共情回应。

在专门考"AI说得像不像人"的S2S语音指令遵循公开基准VStyle上,模型取得SOTA成绩。


像真人一样对话:

边说边听,随时打断插话

双工交互流畅度,意味着模型能边说边听,像真人一样随时打断、插话,而非一问一答的对讲机模式。Qwen-Audio-3.0-Realtime内置"多模态感知的双工控制"子模型,通过分析音频信号、语义内容与说话人声纹特征,来判断如何交谈。

在餐厅、开放工区等嘈杂环境中,它不会被背景噪声误打断;在多人讨论中能锁定主对话对象、忽略旁听者交谈;在多说话人切换时,则能根据语义线索自然过渡。今年5月,Preview版本在对话流畅度指标上曾以97.8%登顶Artificial Analysis。此外,模型的API还预留了audio_prompt字段,用户可上传提前录制的音频样本,锁定声纹,聚焦特定的说话人。


On-Policy Distillation与多教师蒸馏

上述能力的提升,源于模型采用的On-Policy Distillation(在线策略蒸馏)框架——研究团队将文本大模型的完整推理能力蒸馏至语音模型:语音模型一边自己生成回答,一边由文本大模型实时纠正。

同时引入多教师蒸馏策略,确保模型在四条主线上均不偏科:口语多轮偏好教师保障口语化表达与指令遵循,通用教师负责基础问答与推理,Agentic教师锁定工具调用与复杂任务,音频理解教师处理副语言与音频语义信息。

从毫秒级响应到自行调用工具,从共情语气到边说边听,Qwen-Audio-3.0-Realtime想做的,是一个"又快又聪明"、聊起来更像真人的实时语音模型。我们期待看到大家基于它构建的下一代语音交互应用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
乌媒:中国仍在使用KD-63反舰导弹,苏联P-15“白蚁”的仿制品

乌媒:中国仍在使用KD-63反舰导弹,苏联P-15“白蚁”的仿制品

零度Military
2026-10-08 21:58:43
卡里克下课倒计时!曼联锁定完美替代者!巴萨名帅成最佳人选

卡里克下课倒计时!曼联锁定完美替代者!巴萨名帅成最佳人选

澜归序
2026-10-09 08:58:00
歼-20的问世,拯救了几乎全部中国人的性命和尊严,为啥这样说

歼-20的问世,拯救了几乎全部中国人的性命和尊严,为啥这样说

举头月已燕归来
2026-09-08 12:22:03
76人输给篮网!这一战看到4个事实:詹姆斯拿388万年薪太超值

76人输给篮网!这一战看到4个事实:詹姆斯拿388万年薪太超值

篮球大视野
2026-10-09 10:40:09
白百何丈夫张思麟的前妻张蕊,现任疑似张继科,搭档创业引热议

白百何丈夫张思麟的前妻张蕊,现任疑似张继科,搭档创业引热议

旧史新谭
2026-10-09 17:53:27
中国艺术研究院原院长连辑严重违纪违法被开除党籍

中国艺术研究院原院长连辑严重违纪违法被开除党籍

新华社
2026-10-09 17:08:25
乌国家紧急情况局:克拉马托尔斯克遭袭致33人死亡

乌国家紧急情况局:克拉马托尔斯克遭袭致33人死亡

澎湃新闻
2026-10-08 23:31:04
郑钦文第四次跻身1000赛四强,其中三次来自中国赛季

郑钦文第四次跻身1000赛四强,其中三次来自中国赛季

懂球帝
2026-10-09 17:51:39
被停职审查、转移资产、搞办公室恋情,董明珠身上的标签是真是假

被停职审查、转移资产、搞办公室恋情,董明珠身上的标签是真是假

历史点行
2026-10-08 15:46:26
苏泊尔压力锅用70天锅底脱落,客服:九成是干烧,消费者需自担280元运费

苏泊尔压力锅用70天锅底脱落,客服:九成是干烧,消费者需自担280元运费

蓝鲨消费
2026-10-08 15:04:00
开拓者执行杨瀚森选项已成定局,不执行才会震惊联盟,此事无关国籍

开拓者执行杨瀚森选项已成定局,不执行才会震惊联盟,此事无关国籍

陈錈爱体育
2026-10-09 08:36:06
这就是公开辱华的后果!取消冠军头衔只是开始,职业生涯也全毁了

这就是公开辱华的后果!取消冠军头衔只是开始,职业生涯也全毁了

阿凫爱吐槽
2025-12-17 17:24:39
2-0!沙特队夺冠了!5场零失球强势登顶,剑指2027亚洲杯!

2-0!沙特队夺冠了!5场零失球强势登顶,剑指2027亚洲杯!

绿茵舞着
2026-10-08 22:05:59
寒假定了!深圳中小学放假时间出炉,“APEC假期”会有吗?

寒假定了!深圳中小学放假时间出炉,“APEC假期”会有吗?

教育大事
2026-10-09 11:08:22
“滚回你的国家去!”希腊一中学爆出种族歧视风波,学生占领校园抗议

“滚回你的国家去!”希腊一中学爆出种族歧视风波,学生占领校园抗议

以希腊之名
2026-10-09 18:20:24
毕业两年年薪300万!曾经的“天坑专业”杀回来了,机器人公司正在疯狂抢人

毕业两年年薪300万!曾经的“天坑专业”杀回来了,机器人公司正在疯狂抢人

阅读第一
2026-10-09 08:35:56
重磅:曝乌克兰再次攻入俄罗斯领土库尔斯克!向特特基诺推进

重磅:曝乌克兰再次攻入俄罗斯领土库尔斯克!向特特基诺推进

项鹏飞
2026-10-08 19:57:59
明日九月初一,讲究:1要送,2不见,3不剩,4要吃,为家人祈福,寓意吉祥美满,兴旺富足,安康度秋

明日九月初一,讲究:1要送,2不见,3不剩,4要吃,为家人祈福,寓意吉祥美满,兴旺富足,安康度秋

小茉莉美食记
2026-10-09 12:16:27
最差劲的美国总统是谁,不是拜登、不是特朗普,而是恶行累累的他

最差劲的美国总统是谁,不是拜登、不是特朗普,而是恶行累累的他

郭蛹包工头
2026-10-08 21:56:05
16万起!奥迪新车突然官宣降价

16万起!奥迪新车突然官宣降价

科技堡垒
2026-10-08 11:17:11
2026-10-09 19:12:49
阿里研究院 incentive-icons
阿里研究院
推动商业互联网化
1971文章数 2182关注度
往期回顾 全部

科技要闻

华为小米手机同日涨价,最高涨1000元

头条要闻

菲方称在中方水炮干扰下转运"坐滩"军舰伤员 中方回应

头条要闻

菲方称在中方水炮干扰下转运"坐滩"军舰伤员 中方回应

体育要闻

与C罗硬碰硬,一个72岁老人的倔强

娱乐要闻

吴奇隆宣布重要决定,走上谢霆锋老路

财经要闻

时隔12年,公募基金运作办法修订

汽车要闻

舒适体验全面升级/四驱版续航超700km 理想i6将于10月28日上市

态度原创

亲子
本地
家居
公开课
军事航空

亲子要闻

宝蓝爸爸赖床不愿意起床,宝蓝调皮把爸爸的牙齿刷成各种颜色。

本地新闻

转型再出发 奋勇打头阵

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

直击南部战区海军某部重装空投训练

无障碍浏览 进入关怀版