DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

要闻 >
DeepTech深科技
分享

DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。


(相关资料图)

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents" Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents" Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。

(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。

(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。

(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

标签: 视觉 调用 模态 工作流 复杂程度 agent

THE END
广告、内容合作请点击这里 寻求合作
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表中国财投网的观点和立场。

相关热点

资讯播报

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8
报名费近800元,HYROX为什么还一票难求?
8月21日生意社锰硅市场基差为-220元/吨|每日速看
视频|扬州45名“运河少年工程师”探寻1600年治水秘诀
生意社:8月21日天津地区金属硅通氧553#市场行情
当前热议!中疾控专家:目前新冠疫情已出现下降趋势
解决质量堵点卡点问题15万个 质量强链成果公布 焦点速看
衡阳东站、郴州西站首开动卧,折扣票价低于日间二等座 今日热门
每日热点:活力中国调研行丨福建南靖:山水古村迸发文旅新活力
米体:尤文相较国米中场差距大;道路阅读比赛能力强但移动慢
「甲子光年」正式发布了「2025-2026年度中国科技产业投资榜」,兴富资本获「年度智能制造活跃投资机构」 每日快看
LV“四瓣花”商标维权一审被驳回,此前5起同类诉讼3次获支持
锤炼急救硬技能 筑牢生命防护线——牡丹区职工职业技能大赛急救技能大赛圆满收官|每日热门
每日视讯:生意社:8月21日国内镧铈系稀土价格走势暂稳
重点聚焦!印媒:巴基斯坦若接装歼35A,印度将激活先发制人打击方案
9700万!哈登降薪续约骑士,生涯总薪资破5.11亿比肩詹杜库
中国中免(601888.SH)2026年中报净利润为31.06亿元、较去年同期上涨19.49%
深圳市福田区沙头街道八宝肉蛋堡坊(个体工商户)成立 注册资本1万人民币|焦点快看
今日视点:8月21日小金属概念板块涨幅达2%
每日简讯:5比0皇马、6比0拜仁、3比0曼城,然后输给了一张签?这剧本谁敢写
全国各级工会开办4.8万个暑期托管班-今头条
飞天茅台下跌3元 昨日大涨后技术性回落_焦点观察
【新要闻】国轩高科:配套问界M6纯电版相关项目正积极开展批量供货筹备工作
经发物业发布中期业绩 股东应占溢利3275.8万元同比增加6.17%
江淮汽车还在泥潭
政策红利落地!北海完成首笔跨境电商出口海外仓退税
阿隆索确认恩佐归属切尔西,未承诺其留队前景
英超即将开打!首轮十场数据全解析:哈兰德差1球追平传奇9队换帅|焦点热议
焦点讯息:明日之星冠军杯半决赛因雷电天气中断
每日看点!盛景微(603375.SH)新增一起对外投资,被投资公司为盛景智算(无锡)科技有限公司
叶氏化工集团(00408.HK)宣派中期股息每股0.08港元_快播
文安县令新木材经营部(个体工商户)成立 注册资本5万人民币
今日热文:利物浦后卫拉姆塞租借加盟圣米伦
每日观点:曝奕境汽车南昌门店送出仿版Labubu,品牌总经理曾清林发文回应
每日速读!卡里克同意放人!曼联球星已同意两家意甲俱乐部的转会邀约
今日精选:城建设计(01599):蔡永立获委任为非执行董事
焦点!港通控股(00032.HK)中期股东应占溢利同比减少22.1%至4.04亿港元
快报:海南华铁(603300.SH):上半年净利润2.38亿元,同比下降30.27%
泰坦股份: 半年度非经营性资金占用及其他关联资金往来情况汇总表
中国平安:上半年绿色保险原保险保费收入413.46亿元 每日速递
焦点关注:揭秘涨停 | 利好来袭,医药股掀涨停潮
阿里2027财年第一季度财报:集团收入增长9% 云增速45%创新高
今日快看!男子称自家车库被租客当成“停尸房”,说是存货用,结果放了老人遗体;当地派出所、街道已介入
CBA猛料!中国男篮实力榜第7,徐昕接近出国打球,辽宁两人离队
今日精选:*ST利达(603828)龙虎榜数据(08-20)
热点!五队大交易!沃特森加盟,骑士正式起飞?
“引以为戒”,多家申花球迷组织表示暂停主场助威
优克联旗下乐宠它推出宠物AI智能体并宣布完成旗下AI养宠生态的全线升级-每日时讯
天天资讯:日本连续3个月出现贸易逆差
圆通速递Q2单票净利大增0.09元 利润加速释放 每日热点
西麦食品净利暴增82% 成本下行与创新驱动双击-快播
热点聚焦:考文垂25年降级沉浮终返英超 球迷举牌“我们会回来”兑现
英矽智能发布虚拟衰老细胞平台预览版 焦点短讯
最新消息:斯基拉:维拉正努力求购中后卫,在关注阿达拉比奥尤和托莫里
掘金送走23岁沃特森引众怒,约基奇离队传闻再起 热推荐
杭州酒局,唯一清醒者
秦岭相聚,创领新高 ——岩霸品牌日暨2026年新品发布会在西安隆重召开
热门看点:摩根士丹利据悉挖角巴克莱大将 出任科技业投资银行部门副董事长
关注:8月14日当周国内豆油商业库存140万吨左右
简讯:生意社:上海期货交易所8月19日镍仓单下跌
日本7月进口额同比飙升27.8%至12.1463万亿日元创新高 每日速讯
每日观点:8月19日创业板ETF工银基金份额增加420万份,重仓股中际旭创、宁德时代、新易盛
徐工机械(000425)8月19日主力资金净卖出4594.04万元 实时
每日热文:新版指导目录印发 碳排放计量工具箱更新升级
皇马主帅穆里尼奥对罗德里转投巴萨一事淡然处之:我不需要罗德里 今日视点
友邦保险(01299)将于9月22日派发中期股息每股0.539港元
每日热讯!贡萨洛-拉莫斯:伊布是我的偶像;9号魔咒?我从来不相信这些
美元指数19日大幅下跌 微速讯
Rivian二季度营收增27% EBITDA指引超预期
微头条丨茂硕电源(002660.SZ):上半年净亏损3043.66万元
睿联智算完成近亿元种子轮融资-热议
足协评议费利佩进球被吹:裁判判罚没问题,与角球无关
【报资讯】方正科技:上半年净利润5.74亿元 同比增长232.38%
视讯!万向德农: 万向德农股份有限公司股票交易异常波动公告
上海石油化工股份(00338.HK):2026年半年度计提减值准备合计5.45亿元 热讯
今日热议:红利低波指数涨超1%,红利低波ETF易方达(563020)连续5日获资金加码
恒指夜期开盘(8.19)︱恒指夜期(8月)报25442点 低水53点2026-08-19 17:19:04 智通财经
科泰电源(300153.SZ):子公司签订生产经营场所租赁合同
关节疼别乱补氨糖!对症修护不踩坑,OTC结晶型氨糖才是更优选
图解财报:苏博特上半年归母净利润7401.82万元,同比增长17.03%|速看料
有人在乐山大佛前漂流?景区相关部门:该水域禁止游泳或漂流,将介入处置
离开大疆创办宇树!王兴兴谈创业初衷:一切源于从小对机器人的热爱 百事通
城地香江(603887)龙虎榜数据(08-19)
王力宏现身宇树上市答谢宴,和王兴兴同桌
当前聚焦:AC米兰5000万欧签下莫雷拉,夏窗重磅引援
4-2,4-1足坛激情一夜!拜仁惊天逆转,无C罗的利雅得胜利依旧制造惨案!-微资讯
彩经前瞻:奈梅亨vs博德闪耀,主队伤病较多恐难取胜-焦点报道
北京9条公交线路计划调整:“1路”向西,直达首钢园 实时焦点
创新数字阅读,上海书展呈现文化生态新亮点_热文
快消息!放话挑战中国队!张本智和:亚运会要包揽3金 与松岛会师男单决赛
焦点讯息:青思AI小剧场| 《如果北宋有记录仪》
山谷独立1-0托利马体育,阿龙-罗德里格斯制胜球 焦点消息
微动态丨杭州酒局高管关联多家招商蛇口公司
新消息丨场均13+3,火箭22岁射手可力压伊森,竞争最佳第6人?两大优势助其成功
A股开盘:超4300只个股飘绿,三大指数集体低开
生意社:8月18日欧洲地区对二甲苯收盘价格上涨
武汉公积金租房直付落地 覆盖约1.5万间房源 惠及超2万名租友
8月19日生意社汽油基准价为8785.43元/吨 通讯
8月19日生意社皮棉基准价为17972.33元/吨 最新资讯
当前热议!俄铝(00486.HK)发布中期业绩 股东应占溢利4.19亿美元 同比扭亏为盈

相关推荐

精彩推送

3