网易首页 > 网易号 > 正文 申请入驻

网易有道重磅发布“子曰4”,全量开源多模态与TTS双引擎

0
分享至

近日,网易有道宣布“子曰”大模型迎来 4.0 版本的全方位升级。“子曰4" 正式迈入全模态时代,不仅全面支持文本、图片、音频的融合交互,有道更宣布将核心的“多模态模型”与“语音合成(TTS)模型”正式开源。与此同时,翻译模型也迎来了深度的技术重构,翻译质量与效率实现双重提升。

多模态模型视觉与数理斩获SOTA,纯文本数理难题性能行业领先

据介绍,开源的“子曰4”多模态模型在 27B 参数规模上,面向教育场景,将支持视觉输入的数理能力拉到了行业顶尖水平(SOTA)。在同等参数规模的模型中,“子曰4”在处理带图表的数学题、物理题等高难度视觉数理问题上表现惊艳。中文纯文本数理难题的性能也获得显著提升,模型准确率达81.4%,达到行业领先水平。


子曰4在多个视觉数理基准上达到同规模模型中最佳水平

图片来源: https://huggingface.co/netease-youdao/Confucius4

更为关键的突破在于实际落地的“性价比”。相关负责人介绍,新模型采用了精细化思维链重构方案,通过汇聚大规模优质精简的推理样本进行深度优化,成功将推理思维链输出长度压缩了43.2%。

这意味着它可以用更少的 Token、更短的推理路径更快地给出答案,为企业和开发者大幅降低了实际业务场景中的推理成本。


子曰4在多个视觉数理基准上大幅降低了输出token的数量

图片来源: https://huggingface.co/netease-youdao/Confucius4

此外,子曰研发团队针对国内学生真实的作业、考试和提问场景进行了深度优化,让它能够真正解决中国学生在实际学习中遇到的真实问题,成为更有温度的数字化助手。

开源TTS:支持14 种语言,3秒克隆原声,跨语种不再有口音

此次与多模态模型一同开源的还有语音合成(TTS)引擎 ,该引擎基于前沿的“语音编码器 + LLM”架构打造,面向开发者及内容创作者提供零样本、低门槛的语音克隆与情感合成能力。

目前,它已全面支持中文、英语、日语、韩语、德语、法语、西班牙语、印尼语、意大利语、泰语、葡萄牙语、俄语、马来语及越南语共 14 种语言。系统可支持不同语言间同一说话者音色的自然迁移,无需额外训练即可保持音色一致性,且合成结果具备母语级别的自然度与流畅度,跨语种克隆也没有口音泄露问题。

在声音克隆方面,子曰4实现了“上传即可克隆”的全量支持能力,用户仅需提供任意音频素材,系统即可在三秒内完成原声复制。据介绍,该引擎在克隆任务中的准确度超过 97%,克隆音色与原声的相似度达 85% 以上。在保留说话人独特音色的同时,还可精准还原其情感色彩,综合能力达到该领域第一梯队。

此外,该开源模型在真实多语言场景中展现出较好的稳健性,可应对日常对话、新闻播报、企业宣传等不同语境及复杂情感表达等多种合成需求。

翻译模型质量全面升级,推理速度提升80%

作为有道最为深厚的技术资产,翻译模型在本次升级中也迎来了重要的技术升级,使其在翻译任务中表现进一步提升。

在数据层面,子曰团队收集并清洗了上亿级别的多语言数据,并聘请具有专八认证的专业人员进行多维度人工评估,从源头保证语料的高品质。

在算法层面,模型采用了创新的“多专家 OPD ”模式,用一种更聪明的“软方式”博采众长,同时通过强化学习引入格式奖励和语言检测机制,有效解决了机翻常见的脱靶和语种混出问题。

为了应对高频、高并发的产业级应用,升级后的翻译模型配备了高效的加速机制,使得整体推理速度直接飙升80%。配合大模型自动评测与人工随机抽检相结合的定制化方案,新一代翻译模型在文本、图片和文档翻译等多场景下,都展现出了兼具速度与质量的极高水准。

回望有道在AI领域的探索历程,从最初子曰以首个教育垂直大模型姿态亮相、推出颠覆传统口语练习模式的“虚拟人口语教练Hi Echo”,到“子曰”2.0、3.0版本在软硬件生态中的全面扎根,有道始终走在 AI 赋能场景的最前沿。2026年,有道更是按下了应用落地的加速键,陆续发布了LobsterAI、有道宝库、有道同传Agent、Thinkflow等一系列AI Agent产品,实现了全场景 AI Agent 矩阵的前瞻性布局。

“子曰4” 的升级与核心模型全量开源,不仅大幅降低了开发者在多模态与语音合成领域的应用门槛,也向行业展示了以底层核心技术滋养上层 Agent 矩阵的生态闭环。有道希望,随着全球开发者与开源社区的共同注入,这一套全模态大模型生态将在更广泛的产业中激发出真正的生产力变革。

附开源地址:

  • “子曰4”多模态模型:https://huggingface.co/netease-youdao/Confucius4
  • “子曰4“TTS模型:https://github.com/netease-youdao/Confucius4-TTS

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
星宇董事长亲自道歉!看似句句诚恳,实则敲打举报人,舆论再反扑

星宇董事长亲自道歉!看似句句诚恳,实则敲打举报人,舆论再反扑

鲸探所长
2026-09-02 16:40:24
打通吉隆!“最后一公里,一定要进去”

打通吉隆!“最后一公里,一定要进去”

环球网资讯
2026-09-03 11:42:10
人口增量第一城,掉队了

人口增量第一城,掉队了

城市财经
2026-08-31 11:58:14
暂无法离开美国!李月汝本人揭秘:更换护照 结果新旧护照一起寄丢了

暂无法离开美国!李月汝本人揭秘:更换护照 结果新旧护照一起寄丢了

醉卧浮生
2026-09-03 11:25:33
美军暴击伊朗,6个半小时压着打,已造成大量伤亡,伊朗激射10枚重型导弹反击!

美军暴击伊朗,6个半小时压着打,已造成大量伤亡,伊朗激射10枚重型导弹反击!

扶苏聊历史
2026-09-02 16:59:45
2013年,因停车收费问题,28岁的杨雪鸥驾驶牧马人越野车撞死停车管理员

2013年,因停车收费问题,28岁的杨雪鸥驾驶牧马人越野车撞死停车管理员

法网恢恢
2026-09-02 21:47:30
电梯造谣女伏法!舆论再次失控,网友疯狂抵制,关联品牌被拉下水

电梯造谣女伏法!舆论再次失控,网友疯狂抵制,关联品牌被拉下水

社会日日鲜
2026-09-03 11:00:32
小卡正式回应官方处罚:我承担全部责任 不知晓任何规避工资帽意图

小卡正式回应官方处罚:我承担全部责任 不知晓任何规避工资帽意图

罗说NBA
2026-09-03 04:47:59
93岁港星刘兆铭离世!48岁被徐克钦点入行,发哥华仔都是他学生

93岁港星刘兆铭离世!48岁被徐克钦点入行,发哥华仔都是他学生

新金牌娱乐观察家
2026-09-03 10:55:32
美网郑钦文2-5狂追至4-5功亏一篑,关键分手抖痛失首盘

美网郑钦文2-5狂追至4-5功亏一篑,关键分手抖痛失首盘

梦忆之浅
2026-09-03 09:39:58
国家体育总局局长高志丹:严肃整治弄虚作假、操纵比赛、赛场暴力等行业乱象,坚定不移开展反腐败斗争

国家体育总局局长高志丹:严肃整治弄虚作假、操纵比赛、赛场暴力等行业乱象,坚定不移开展反腐败斗争

政知新媒体
2026-09-03 10:40:27
井柏然:以为和倪妮分手遇到刘雯,就够幸运了,没想到幸福又升级

井柏然:以为和倪妮分手遇到刘雯,就够幸运了,没想到幸福又升级

郭蛹包工头
2026-09-03 08:38:30
芭堤雅如此迎接“林肯”号“休息与娱乐”?

芭堤雅如此迎接“林肯”号“休息与娱乐”?

新民周刊
2026-09-03 09:10:52
220万辆新车烂在4S店!2200亿库存泡沫,最后谁来接盘?

220万辆新车烂在4S店!2200亿库存泡沫,最后谁来接盘?

沙雕小琳琳
2026-09-03 10:49:17
保罗啊!以后别跟威少玩了!!真的!!!!

保罗啊!以后别跟威少玩了!!真的!!!!

柚子说球
2026-09-02 23:21:41
免签大门全开了,中国游客这次却集体“调头”!

免签大门全开了,中国游客这次却集体“调头”!

乌克兰小静
2026-09-03 07:59:47
家长群显摆翻车:我是市人民医院纪委书记

家长群显摆翻车:我是市人民医院纪委书记

原某报记者
2026-09-03 11:14:38
美国打伊朗半年花375亿,够6300万人脱贫一整年!五角大楼的账单,越看越窒息

美国打伊朗半年花375亿,够6300万人脱贫一整年!五角大楼的账单,越看越窒息

可达鸭面面观
2026-08-28 18:05:43
震惊!离职反倒倒贴上万元,中山一日企裁员出新招:不愿签协议,就强制停工放6个月长假

震惊!离职反倒倒贴上万元,中山一日企裁员出新招:不愿签协议,就强制停工放6个月长假

火山詩话
2026-09-02 09:03:32
大满贯16连胜!阿尔卡拉斯3-1跻身美网32强,下轮将战吴易昺

大满贯16连胜!阿尔卡拉斯3-1跻身美网32强,下轮将战吴易昺

全景体育V
2026-09-03 11:16:34
2026-09-03 13:27:00
CSDN incentive-icons
CSDN
成就一亿技术人
26919文章数 242322关注度
往期回顾 全部

科技要闻

大模型扎堆!谷歌刚发,Meta就跟上

头条要闻

"韦东奕教辅书"已售十几万件 有家长要退货:难度一般

头条要闻

"韦东奕教辅书"已售十几万件 有家长要退货:难度一般

体育要闻

小卡回应处罚:不知晓任何规避工资帽意图

娱乐要闻

德云社停更20天再营业!

财经要闻

再见了,期房!商品房预售制卒于2026

汽车要闻

实拍捷途旅行者7 风格更潮/混动版配上华为乾崑ADS 5

态度原创

本地
时尚
数码
教育
公开课

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

白衬衫不火了?早秋穿“棕色衬衫”更高级好看

数码要闻

可正常运行的Apple I电脑将于拍卖会上竞拍 估价最高达80万美元

教育要闻

“Blow Your Mind”不是“吹走你的脑子”!这个从1960年代致幻剂中诞生的英语习语,比“Amazing”高级100倍

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版