网易首页 > 网易号 > 正文 申请入驻

引领新一代人机交互,科大讯飞发布具身多模交互技术

0
分享至

嘈杂环境里听清每一句话,多人交谈中找准回应对象,甚至是在复杂声音场景中听懂人类语言以外的声音……AI 从数字世界走向物理世界,不仅要听清、看懂,还要在动态环境中理解意图、协调行动。

10 月 22 日,2026 科大讯飞全球 1024 开发者节主论坛上,董事长刘庆峰发布星火语音大模型 SparkAudio 1.0、多模交互技术以及星火具身多模交互技术及相关产品。“大家千呼万唤,期待机器人从运动会、表演舞台走向日常生活、走进千家万户。”刘庆峰表示,科大讯飞沿着“语音交互—多模交互—具身多模交互”持续进阶,以软硬一体的技术和产品创新,引领新一代人机交互走进千家万户。



语音交互:效果提升、响应更快、成本降低

在语音交互领域,高噪识别一直是行业难点,在此基础上的复杂音频感知和多人语音分析更属于进阶功能。

针对这些难点,科大讯飞发布星火语音基座大模型SparkAudio 1.0,带来语音识别、同传和交互,以及音频理解、情绪识别、实时说话人分离和环境声理解等智能语音能力的全面提升。



SparkAudio 1.0有刑侦剧中“声音侦探”的类似能力,即使置身嘈杂的街头,也能辨别喇叭声、叫卖声、车轮摩擦地面的声音,分清交织的人声,从声音线索中推理周围环境,不仅“听清说了什么”,更能“听懂发生了什么”。

这背后,是半监督音频编码器、动态分段端到端建模、双范式协同解码等三项技术创新,相关测试显示整体效果提升20%、响应时间降低15%、成本降低60%,让语音服务更准确、更及时,也更易规模化应用。

SparkAudio 1.0 已在讯飞产品中上线,大家在讯飞输入法 16.0、讯飞听见、讯飞智能办公本等产品中都能体验。现场还发布了讯飞AI录音环,可如手机支架一样磁吸贴在手机背面,随时开启录音,2小时录音转写仅需2分钟,综合识别准确率超96%。

多模交互,已应用在AI眼镜、智慧座舱等产品

从语音交互走向多模交互,AI不仅要能听会说,还要结合视觉信息理解场景,并将不同来源的信息准确对应起来,进一步提升理解与推理能力。

此次发布的多模交互技术进一步融合多模远场识别、多人交互、视听觉融合理解、个性化记忆和情感语义,让AI理解更丰富的场景信息。

讯飞 AI 眼镜就是该技术的典型应用产品。科大讯飞穿戴业务事业部总经理林会杰现场展示了刚刚用讯飞AI眼镜记录的刘庆峰演讲过程纪要,内容层次清晰、图文并茂。随后与西班牙语、英语使用者分别用各自母语交流,由眼镜实时翻译,他还通过眼镜为同台嘉宾点咖啡,并联动电脑端处理办公任务,呈现辅助记录、沟通和办事的应用场景。



这副重约 40 克的眼镜,通过 5 麦阵列、骨传导与唇动识别协同改善复杂环境拾音,支持 120 余种语言翻译,同传首响低至 2 秒。不仅有智能提词、声图文纪要、多语种翻译等功能,还能拍照搜索、实时导览、骑行记录,助力工作和生活。

汽车场景更考验远场拾音与抗噪能力。以“47秒念完350字”的语速著称的主持人华少体验星火智慧座舱 3.0 ,一口气对它说了一长段初次到一个城市的办事和接待需求,星火智慧座舱3.0不仅立刻理解、安排了最优路线,并顺带推荐了店铺、预定了餐厅。



星火智慧座舱3.0提供超100项多模感知能力,多模感知成功率超95%,模糊理解准确率超93%,车外远场交互距离达30米,远超行业平均水平,“更懂你、会办事、超临感”。

发布具身多模交互技术,推出机器人超脑平台V3.0

“人机交互历来是牵引着产业革命的。”刘庆峰表示,机器人不仅要具备行动能力,更要能在行动中与人自然交流,在距离和噪声不断变化的环境中听清指令、理解多人意图,并协调语音与动作。



从智能终端走向移动机器人,交互还要适应空间变化、多人参与和动作执行。针对这些挑战,科大讯飞发布星火具身多模交互技术,在复杂空间动态降噪、多目标人的交互意图识别、语音与动作统一规划与执行、视觉触发的主动交互等方面取得突破,让机器人在动态环境中既能与人交流,又能协同完成任务,为其进入家庭和社会服务场景提供关键技术支撑。

主会现场展示了机器人超市、机器人物流驿站,在现场嘈杂、多人围观的情况下,机器人都准确完成了任务。

科大讯飞还推出了机器人超脑平台V3.0,整合星火超脑板、具身智能开发套件、多模态交互模组及具身多模交互Harness,通过端云协同、前后台协同,让机器人前台畅聊不停、后台持续办事,并支持模块化、配置化的行业定制。

本次主论坛,科大讯飞回应AI时代“如何兼顾安全与成本,如何从数字世界走向物理世界,如何将个人提效转化为组织成效”等关键问题。除了星火语音大模型SparkAudio 1.0、星火具身多模交互技术及相关产品,科大讯飞还发布端云一体讯飞星火X2.6及系列产品,以及讯飞星帆WinWork数字员工平台和科大讯飞AIPC等,并面向智能硬件和企业应用等领域开发者发布新的技术解决方案,星辰TaaS平台也进一步推动“从Token到Solution”。

“一代人有一代人的长征,人工智能是一场凝心聚力的长跑。” 刘庆峰最后说,科大讯飞将持续以国产AI创造社会价值,解放生产力、释放想象力,用人工智能建设美好世界。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广东莲阳大桥管道断裂,多人坠河,更多内情曝光

广东莲阳大桥管道断裂,多人坠河,更多内情曝光

社会日日鲜
2026-10-26 14:38:46
80多年没人打扫的战场,如今遍地都是“黄金”,不少人发了大财

80多年没人打扫的战场,如今遍地都是“黄金”,不少人发了大财

兴趣知识
2026-10-26 03:05:52
养老金差距本质上是分配不公平,而不是谁缴费更多

养老金差距本质上是分配不公平,而不是谁缴费更多

马小白
2026-10-27 10:41:50
三大指数集体翻绿

三大指数集体翻绿

界面新闻
2026-10-27 10:03:18
菲律宾正式召见井泉,反华政客叫嚣驱逐中国大使,井泉当场驳斥

菲律宾正式召见井泉,反华政客叫嚣驱逐中国大使,井泉当场驳斥

揽星戈
2026-10-26 01:17:08
武大教材风波再起!三位主编任的职信息被扒,均在二三本高校任职

武大教材风波再起!三位主编任的职信息被扒,均在二三本高校任职

卷史
2026-10-25 10:27:40
李冰冰白发显露,再优越条件也敌不过时光

李冰冰白发显露,再优越条件也敌不过时光

娱你同欢
2026-10-26 21:08:06
iPad mini 60Hz屏引争议:2026年还能找到60Hz产线 真难为苹果了

iPad mini 60Hz屏引争议:2026年还能找到60Hz产线 真难为苹果了

快科技
2026-10-27 07:08:08
姆巴佩的沉默比失言更说明问题

姆巴佩的沉默比失言更说明问题

热点追踪人
2026-10-27 14:16:27
姆巴佩,中国市场不欠你的

姆巴佩,中国市场不欠你的

静暖文字
2026-10-27 13:16:53
张某(某国家部委工作人员),因个人矛盾投靠境外间谍情报机关,违规下载、拍摄、拷贝涉密文件并秘密录音,窃取近30万份,12人失职被处分

张某(某国家部委工作人员),因个人矛盾投靠境外间谍情报机关,违规下载、拍摄、拷贝涉密文件并秘密录音,窃取近30万份,12人失职被处分

南方都市报
2026-10-27 08:45:52
中美最奇妙的默契,就是各自造了一个价值65万亿美元的巨型水库来安放国民信仰

中美最奇妙的默契,就是各自造了一个价值65万亿美元的巨型水库来安放国民信仰

扶苏聊历史
2026-09-28 11:19:18
陈熠夺冠后,日媒复盘张本美和惨败:打法被吃透,中远台是死穴

陈熠夺冠后,日媒复盘张本美和惨败:打法被吃透,中远台是死穴

林子说事
2026-10-27 13:09:15
一家四口高铁出行,买了三张票,4岁娃却被单独分到静音车厢,家长无奈退儿童票挤坐;官方回应:有三次免费取消订单机会

一家四口高铁出行,买了三张票,4岁娃却被单独分到静音车厢,家长无奈退儿童票挤坐;官方回应:有三次免费取消订单机会

极目新闻
2026-10-26 22:32:18
人民币汇率新价格,2026年10月27日,人民币汇率兑换各类外币最新中间价

人民币汇率新价格,2026年10月27日,人民币汇率兑换各类外币最新中间价

生活新鲜市
2026-10-27 13:13:57
很扎心!妻子感冒想让丈夫回来照顾孩子,丈夫要应酬转账10000,妻子:该不该离婚?网友吵翻了!

很扎心!妻子感冒想让丈夫回来照顾孩子,丈夫要应酬转账10000,妻子:该不该离婚?网友吵翻了!

丫头舫
2026-10-26 18:43:28
姆巴佩作死到查无此人,谁也怪不了

姆巴佩作死到查无此人,谁也怪不了

小鱼爱鱼乐
2026-10-27 15:38:37
不结婚老了咋办?北京42岁女子的答案,让全网沉默

不结婚老了咋办?北京42岁女子的答案,让全网沉默

找回密码
2026-10-24 21:15:54
杨议演出怼观众后,文旅局介入调查,限高记录被扒,口碑引发争议

杨议演出怼观众后,文旅局介入调查,限高记录被扒,口碑引发争议

琴琴有氧运动
2026-10-27 14:59:05
差点当成电子垃圾!网友翻出1995年顶级扩展卡:当年是BBS站长标配

差点当成电子垃圾!网友翻出1995年顶级扩展卡:当年是BBS站长标配

快科技
2026-10-26 19:11:09
2026-10-27 16:12:49
靠谱的阿星 incentive-icons
靠谱的阿星
靠谱汇创始人,科技专栏作家
819文章数 262503关注度
往期回顾 全部

科技要闻

Anthropic最硬气招股书,先把丑话说在前头

头条要闻

香港15名公务员合买彩票中3000万元 兑奖人欲独吞被捕

头条要闻

香港15名公务员合买彩票中3000万元 兑奖人欲独吞被捕

体育要闻

世界上最无趣的前锋,拿下了金球奖

娱乐要闻

芒果遇到厉娜和许飞笑发财了!

财经要闻

韩国芯片出口额可能下降高达1000亿美元

汽车要闻

2027款吉利缤越超能版上市,先享价5.98万元起

态度原创

健康
教育
亲子
手机
房产

查不出猝死风险?可能是项目没做对

教育要闻

应届生三方协议,签之前不看这篇会后悔

亲子要闻

小天赐,终为父母当年的“冲动”买了单,年仅7岁活得不像个小孩

手机要闻

全网第一例!iPhone Duo外屏惊现绿线:没摔没磕碰

房产要闻

从全国第一跌到第七!海南人,放下生娃焦虑!

无障碍浏览 进入关怀版