网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

0
分享至



DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents' Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents' Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。


(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。


(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。


(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
比诈骗更黑暗的秘密!泰军控制9个月后,柬埔寨奥斯马园区再次曝光:157栋建筑里有一间手术室

比诈骗更黑暗的秘密!泰军控制9个月后,柬埔寨奥斯马园区再次曝光:157栋建筑里有一间手术室

暹罗飞鸟
2026-09-10 02:17:15
“摸臀” 女网红社死,安徽母校评论区被冲烂,留学梦可能有变数

“摸臀” 女网红社死,安徽母校评论区被冲烂,留学梦可能有变数

四斤
2026-09-09 15:22:29
刚刚,宇树科技,首次跌破500元/股!

刚刚,宇树科技,首次跌破500元/股!

数据宝
2026-09-10 10:49:07
人民日报发声!已经不是简单道歉的事,多名律师支持男童一方起诉

人民日报发声!已经不是简单道歉的事,多名律师支持男童一方起诉

放开他让wo来
2026-09-10 10:43:36
张雪公开致歉:由于个人管理能力不足,修养不足,让大家失望了

张雪公开致歉:由于个人管理能力不足,修养不足,让大家失望了

毒sir财经
2026-09-09 18:32:42
德比斯说要是赛事方不限制张雪机车的节气门到85%,而是能调节到100%,那比赛就没有悬念了

德比斯说要是赛事方不限制张雪机车的节气门到85%,而是能调节到100%,那比赛就没有悬念了

刘哥谈体育
2026-09-10 09:16:47
退休人员都在等!今年养老金还涨不涨?财政部正式通知下来了吗

退休人员都在等!今年养老金还涨不涨?财政部正式通知下来了吗

白昼说故事
2026-09-10 11:24:00
网友盼上海体育局公布刘翔代言抽成 49.4万买断一个奥运冠军成笑话

网友盼上海体育局公布刘翔代言抽成 49.4万买断一个奥运冠军成笑话

劲爆体坛
2026-09-10 10:27:10
WTT澳门冠军赛:大捷报!陈幸同3:0大获全胜,国乒单打3胜3负

WTT澳门冠军赛:大捷报!陈幸同3:0大获全胜,国乒单打3胜3负

国乒二三事
2026-09-10 12:05:16
脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

火山詩话
2026-09-10 10:40:36
三星发文讥讽苹果iPhone Duo是“热别人剩下的剩菜”

三星发文讥讽苹果iPhone Duo是“热别人剩下的剩菜”

cnBeta.COM
2026-09-10 06:20:06
波多黎各主帅:中国太强不想再和她们对阵 能否把张子宇送给我们队?

波多黎各主帅:中国太强不想再和她们对阵 能否把张子宇送给我们队?

罗说NBA
2026-09-10 07:03:11
15999,苹果杀死比赛了

15999,苹果杀死比赛了

放毒
2026-09-10 07:10:45
“生物爹”怒了:四川大叔带着叛逆女儿跑货车,一路见遍人间苦,却意外刷爆全网!

“生物爹”怒了:四川大叔带着叛逆女儿跑货车,一路见遍人间苦,却意外刷爆全网!

阅读第一
2026-09-09 08:35:40
中国移动回应iPhoneDuo仅支持eSIM:eSIM服务与具体机型相关,目前也在不断更新,建议携机到营业厅咨询

中国移动回应iPhoneDuo仅支持eSIM:eSIM服务与具体机型相关,目前也在不断更新,建议携机到营业厅咨询

鲁中晨报
2026-09-10 09:51:03
影视飓风连续五年送员工苹果新机:每人一台iPhone Duo(可自选等价的其他型号) ,包括实习生和新人

影视飓风连续五年送员工苹果新机:每人一台iPhone Duo(可自选等价的其他型号) ,包括实习生和新人

大风新闻
2026-09-10 09:04:14
现实版多尔衮悲剧!东莞一男子供养女友3个孩子多年,最终惨遭枕边人杀害分尸,评论区炸锅

现实版多尔衮悲剧!东莞一男子供养女友3个孩子多年,最终惨遭枕边人杀害分尸,评论区炸锅

火山詩话
2026-09-10 06:44:55
天呢!网传大批00后开始坐牢,原因令人震惊...

天呢!网传大批00后开始坐牢,原因令人震惊...

慧翔百科
2026-09-10 08:27:31
10999元!iPhone 18 Pro Max把我看爽了,价格不算炸裂

10999元!iPhone 18 Pro Max把我看爽了,价格不算炸裂

搞机小帝
2026-09-10 03:39:05
付磊的妻子汪海英:我用青春和奉献滋养了一头狼

付磊的妻子汪海英:我用青春和奉献滋养了一头狼

细品名人
2026-09-10 06:44:14
2026-09-10 13:59:00
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17219文章数 515211关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

停资助遭女生质问"快打过来不然曝光你" 男子最新回应

头条要闻

停资助遭女生质问"快打过来不然曝光你" 男子最新回应

体育要闻

一年丢掉的积分排名,郑钦文用18天找回来

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

李嘉诚的创新药生意,拿下87亿大订单

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

房产
游戏
本地
时尚
公开课

房产要闻

别不服!海南的亿万富豪,只有不到300个!

《无畏契约》惊现超猎奇恐怖外挂 角色被血腥魔改

本地新闻

宁波,中国制造的隐藏大佬

女人不管多大,都可以看看这些“条纹T恤”,非常减龄又简约

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版