网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

0
分享至



DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents' Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents' Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。


(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。


(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。


(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
开学第一周,妈妈深夜一封信火了:孩子你记住,自逼为王,人逼为将,不逼为卒

开学第一周,妈妈深夜一封信火了:孩子你记住,自逼为王,人逼为将,不逼为卒

男孩派
2026-09-04 09:47:52
网友称航班落地后托运的宠物犬失联2小时,再见到已是遗体,大韩航空发布声明:飞行环境无异常,死因仍待调查

网友称航班落地后托运的宠物犬失联2小时,再见到已是遗体,大韩航空发布声明:飞行环境无异常,死因仍待调查

每日经济新闻
2026-09-10 00:11:43
马凯硕警告台湾“务必不要触碰红线”

马凯硕警告台湾“务必不要触碰红线”

参考消息
2026-09-09 18:06:16
原来他是董建华亲弟弟,家族资产超300亿,在英国买大楼当包租公

原来他是董建华亲弟弟,家族资产超300亿,在英国买大楼当包租公

米果说识
2026-09-09 14:21:21
嘴硬?日本华裔前羽毛球手身材照走红,本人称不是AI但疑点多

嘴硬?日本华裔前羽毛球手身材照走红,本人称不是AI但疑点多

懂球帝
2026-09-09 12:37:35
女篮八强赛,中国女篮VS法国开球时间敲定,央视直播,宫鲁鸣争胜

女篮八强赛,中国女篮VS法国开球时间敲定,央视直播,宫鲁鸣争胜

富贵体坛说
2026-09-10 01:59:54
41岁Coco被曝:回河南老家相亲了好几次,全黄了!大家听到她和那个人的感情经历后,都说了一句相同的话...

41岁Coco被曝:回河南老家相亲了好几次,全黄了!大家听到她和那个人的感情经历后,都说了一句相同的话...

美芽
2026-08-06 12:35:35
60岁开始打针,多活七八年?Nature证实:减肥神药司美格鲁肽不仅让你瘦,还能直击衰老根源

60岁开始打针,多活七八年?Nature证实:减肥神药司美格鲁肽不仅让你瘦,还能直击衰老根源

爱医斯坦
2026-09-07 12:00:16
查尔斯信函堵死变现路,哈里演讲费跌95%,返英生计在哪?

查尔斯信函堵死变现路,哈里演讲费跌95%,返英生计在哪?

可乐谈情感
2026-09-10 00:07:09
越南政府的决议实际上就是要扼杀广西平陆运河出海口

越南政府的决议实际上就是要扼杀广西平陆运河出海口

安安说
2026-08-31 11:15:16
220万买下临街旺铺,有房本却无权锁门;法院判决:需给后方两铺留通道留门

220万买下临街旺铺,有房本却无权锁门;法院判决:需给后方两铺留通道留门

大风新闻
2026-09-09 19:55:08
预算4000万欧!国米转型再酿重磅投资 控股海外球队学习曼城

预算4000万欧!国米转型再酿重磅投资 控股海外球队学习曼城

国际足球冷雪
2026-09-10 08:19:08
网传iOS27正式版推送,升级机型名单曝光

网传iOS27正式版推送,升级机型名单曝光

小柱解说游戏
2026-09-10 01:16:15
胜波多黎各,一人令人失望,0分+违体+拒投+停球,遭隋菲菲‌点名批评

胜波多黎各,一人令人失望,0分+违体+拒投+停球,遭隋菲菲‌点名批评

南海浪花
2026-09-10 08:41:02
一夜大乱!NBA4笔签约+重磅交易官宣,哈登留队,欧文遭多队哄抢

一夜大乱!NBA4笔签约+重磅交易官宣,哈登留队,欧文遭多队哄抢

钱说体育
2026-09-09 08:39:23
蓝营叛将参选花莲县长!魏嘉贤喊话国民党支持者:未主动背弃蓝营

蓝营叛将参选花莲县长!魏嘉贤喊话国民党支持者:未主动背弃蓝营

靓仔情感
2026-09-10 07:04:58
退休金差距有多离谱?专家怒批:这是锦上添花,不是雪中送炭!

退休金差距有多离谱?专家怒批:这是锦上添花,不是雪中送炭!

你在偷看谁
2026-09-04 20:22:37
1949年划江而治险成真!幸亏没听美苏的,不然中国多惨

1949年划江而治险成真!幸亏没听美苏的,不然中国多惨

小豫讲故事
2026-09-08 06:00:10
看完澳洲82‑80意大利,不得不承认的5个事实,世界杯八强出炉

看完澳洲82‑80意大利,不得不承认的5个事实,世界杯八强出炉

刘哥谈体育
2026-09-10 06:46:12
最新消息:景甜直播了,孙宇晨“投诉成功”引评论区“炸锅大骂”!

最新消息:景甜直播了,孙宇晨“投诉成功”引评论区“炸锅大骂”!

默默有话说
2026-09-09 12:35:08
2026-09-10 09:40:51
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17218文章数 515211关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

头条要闻

iPhone18 Pro系列价格公布:A20 Pro芯片 续航大幅提升

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

银行新高!新一轮周期,刚开始!

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

艺术
数码
旅游
健康
本地

艺术要闻

禁止出境国宝!唐代孙位唯一存世真迹,宋徽宗亲笔题名

数码要闻

立讯精密光博会首发“云雀AIR”,携手光峰科技、慕德微纳探索AR显示新边界

旅游要闻

中国旅游协会举办“开学第一课”系列活动

中风康复为何像“抽丝剥茧”?

本地新闻

宁波,中国制造的隐藏大佬

无障碍浏览 进入关怀版