斧头财信投行研报 · 机构纪要 · 外媒原文 · 快讯

国金计算机 | DeepSeek-V4-Flash模型测评

2026-08-02 14:38 · 外媒原文 · 斧头财信整理

全文摘要

1、DeepSeek V4 Flash产品概况

·核心参数与性价比:DeepSeek V4 Flash为昨日更新的高性价比轻量版本,核心参数为:总参数量284B,单次激活参数13B。性能层面,推理能力超过此前的V4 Pro Preview版本,在部分相对简单的Agent任务上达到全球前沿水平,整体性能与价格和GPT5.6轻量级版本相当,在速度与能力上实现较优平衡。定价层面,百万token输入价格为0.14美元、输出价格为0.28美元,缓存输入价格更低,且实测缓存命中率较高,在保持较强推理与Hinton能力的同时,将实际调用成本压至极低水平。

2、DistSpark技术原理与效果

·DistSpark核心原理:DistSpark是今年7月由梁文锋署名发布的技术,核心逻辑为采用轻量草稿模型一次性提出多个候选token,再由大模型并行验证,其设计创新点包括提升草稿连贯性,且可按照置信度与系统负载动态决定单请求需要验证的token数量。该技术提出了speculative decoding的解码思路,不再要求大模型每次仅验证一个token,而是先由参数规模更小、运行速度更快的草稿模型生成一段候选token,再交由大模型一次性并行验证该段内容,只要验证规则正确,最终的采样分布与直接使用大模型生成完全一致。此外,该技术搭配rejection sampling规则,可精确恢复目标模型的采样分布,不会篡改大模型的输出结果。

·DistSpark应用效果:DistSpark实测性能优异,单用户速度较原MTP提升60%-85%,同时扩展了吞吐与交互性的帕累托边界,提速过程近乎无精度损失,既能提升单用户使用速度,也不会在高并发场景下出现吞吐崩溃的问题。该技术是DeepSeek V4 Flash高性价比的核心支撑,使其在保障输出质量的同时大幅降低使用成本,目前公开的仅为该技术的开源优化部分,还有未公开的优化手段未对外披露。DeepSeek在模型成本优化领域具备显著优势,后续待发布的V4 Pro模型的降本效果与性能表现值得期待。

3、大模型评测体系核心逻辑

·评测体系构建逻辑:当前普通用户评价大模型能力存在痛点,既难以直观判断模型实际效果,常用的公开评测基准也无法清晰展现测试方向,难以准确反映模型真实使用能力。大模型评测体系核心构建逻辑清晰:若要增强模型在特定领域的能力,核心要素为具备对应领域的数据集+由行业专业人员设置评测标准判断任务完成质量。当前全球头部大模型厂商均在推进相关布局:OpenAI招聘SaaS公司实施工程师,除开展To B业务外也参与搭建评测任务体系;国内Kimi、MiniMax均开放工业软件、芯片设计、游戏引擎、金融、法律等各行业专业人才招聘,为评测体系搭建提供支撑。目前普通用户最常参考的artificial analysis综合榜单,是基于十个测试集的得分给出模型排名,但其中不少测试集已经相对老旧。

·主流综合榜单表现:从artificial analysis综合榜单的最新表现来看,GPT5.6轻量版、DeepSeek V4 Flash得分均接近50分,已达到前沿模型能力水平,其中GPT5.6轻量版昨日宣布降价80%,DeepSeek V4 Flash为昨日新发布的超廉价版本。两类产品性价比优势突出,和头部大参数模型对比:排名在上述两款产品之前的K3、Office、GPT5.6全量版等均为2-3T以上参数的大模型,单任务成本约1-2美元,而DeepSeek V4 Flash的单任务成本仅为0.03美元,实现了极致的性能与性价比平衡。当前大模型评测已经脱离早期简单知识问答、简单推理的模式,主要向两个方向演化:a. 沙箱场景类评测:搭建模拟真实电脑环境的沙盒,内置文件、浏览器、SaaS系统、邮箱等工具,要求模型在虚拟环境中完成真实任务,对应采用复杂的定制化打分规则,比如DeepSeek发布的评测基准中前四项均为编程类测试,后三项为沙箱内实际操作类测试;b. 偏文本类评测:典型代表为OpenAI推出的GGTPY6基准,包含数百个任务,每个任务附带PDF、Excel、PPT等格式的附件,要求模型按指令交付文字报告、Excel、PDF等对应产物后再进行评分。

4、典型评测基准案例解析

·V4 Flash实测成本表现:剔除操作失误、后台故障、任务中断等无关个人操作内容后,DeepSeek V4 Flash实际使用成本测试结果显示,总计消耗4亿个token仅花费50元。对比同token消耗量下其他大模型,若按百万token平均10元的常规价格计算,同等4亿token消耗量需花费约4000元,成本优势显著。其低成本核心源于缓存机制效率极高,缓存命中率达80%以上,其中3.3亿token命中缓存,仅4000万token未命中,大幅降低了重复输入的token成本。

·Automation Bench基准:Automation Bench是海外SaaS公司扎皮尔推出的办公场景评测基准,构建逻辑为搭建模拟真实办公环境的虚拟沙箱,覆盖多行业复杂工具操作场景,包括工业软件、办公SaaS、游戏引擎、医药行业专用软件等操作任务,共有数百个测试任务。该基准模拟了47个企业SaaS工具的真实使用环境,涵盖Gmail邮箱、Slack即时通讯、Excel、Salesforce CRM等常用企业办公工具。评测不基于模型回答文本评分,而是以最终任务完成结果是否符合预设标准为核心依据,同时记录模型工具调用路径逐项评分。当前头部大模型在该基准得分普遍偏低,Claude Opus得分仅为26%,DeepSeek V4 Flash得分25.1%,这类低得分基准更能体现不同模型的能力差异,相比已达80分以上的高得分榜单参考价值更高,高得分榜单的参考价值会随模型能力普遍提升逐步下降。这类侧重真实办公场景的评测结果也表明,通用办公场景是大模型继代码能力之后下一个进展较快的落地领域,未来复杂企业流程工作有望由大模型完成。

·Cloud16基准:Cloud16是北京大学与香港大学联合推出的Agent类任务评测基准,评测维度覆盖结果正确性、工具调用合理性、安全合规性等多个维度,任务类型包含工单处理、API状态检查、会议纪要整理、业务咨询、邮件处理等多元办公场景。该基准采用多维度加权评分规则,除客观数字结果校验外,部分主观类任务会引入大模型作为裁判进行多维度评分,同时完整记录模型的执行轨迹、思考过程与工具调用路径,明确标注丢分点。其设置了严格的安全红线与一票否决项:包括明文传输密码、违规发送邮件等突破安全权限的行为直接判定零分;常规扣分项目包括关键信息缺失、未调用指定工具、使用非官方合理工具完成任务、客观数字错误、多轮对话场景下未按要求询问必要信息等,针对会议纪要整理类文本任务,还会按预设的关键词覆盖、优先级标注、发送范围等要求评分,模型最终输出的使用体感与基准设置的标准导向直接相关。整体来看,当前大模型评测已发展为复杂的系统工程,不再是简单的问答测试,均需要搭建虚拟沙箱环境模拟真实的电脑系统与软件生态,评测粒度非常精细,C端用户很难自行完成全维度的模型能力评测,主要依赖公开评测基准的得分判断模型真实能力。

5、DeepSeek工具调用能力实测

·工具调用实测表现:DeepSeek无原生多模态能力,但可调用外部工具完成相关操作。实测显示,其可完成包含固定格式底稿、网页来源截图要求的报告撰写任务,能够接管设备自动弹出浏览器窗口、代替人工点击操作,完成网页截图工作。在MacBook端的原生浏览器操作、截图功能表现良好。当前其能力存在明确边界:涉及不同领域专业软件的任务表现得分较低,后续需针对不同领域联合行业专家逐个突破,相关专业软件覆盖工业设计CAD、游戏引擎、芯片设计EDA等各领域端侧软件。

6、大模型行业发展展望

·行业增长逻辑:当前市场对大模型coding落地后下一个增长点的担忧为时过早,垂类领域并非缺乏付费能力,核心制约是当前模型在各领域操作专业工具的能力暂未达标。目前大模型在专业工具操作类任务的得分仅20%左右,若该能力像简单coding任务一样提升至80%-90分,其他垂类领域的用量将像今年coding领域一样迎来爆发。若前沿大模型迭代进度放缓,行业确实存在陷入价格战的可能,OpenAI于昨日宣布轻量模型降价,但本次降价的核心原因是模型技术手段优化带来的推理成本大幅下降,并非主动发起价格战。若头部厂商的前沿模型能如今年Cloud在coding领域一样率先取得突破、形成较大领先优势,仍可保持较强的定价优势。

·未来发展趋势:当前普通C端用户仅将大模型用于文本类工作时,对不同模型的能力差距感知并不明显,国内开源模型的可用性与前沿闭源模型的差距正在持续缩小。若前沿闭源模型率先在复杂沙盒场景或真实工作场景中取得较高分数、拉开与其他模型的能力差距,行业仍不会陷入价格战。长期来看,大模型未来将成为类似水电的公共基础设施,当前市场对token价格的关注只是阶段性现象,未来用户对token价格的敏感度将持续下降,就像居民日常不会特意关注电费单价一样,不会特意管理token消耗,但对应的算力基建需求将保持长期上升趋势。


Q&A

Q: DeepSeek V4 Flash模型的核心参数、性能表现及定价策略如何?

A: DeepSeek V4 Flash模型总参数量为284B,单次激活参数13B,推理能力已超过V4 Pro Preview版本,在简单Agent任务上达到全球前沿水平,与GPT-4o mini轻量级版本能力与定价相当。模型在速度与能力间实现高效平衡,百万token输入输出价格为0.14至0.28美元,缓存调用价格更低且实测缓存命中率超过80%,显著降低实际调用成本。

Q: DistSpark技术如何优化DeepSeek模型的推理效率与成本?

A: DistSpark采用speculative decoding思路,通过轻量级草稿模型批量生成候选token,由主模型并行验证,并依据置信度与系统负载动态调整验证数量。该技术在几乎无损生成质量的前提下,将每用户推理速度提升60%至85%,扩展吞吐与交互性帕累托边界,是V4 Flash实现高性价比的关键优化路径之一。

Q: 在权威评测基准中,DeepSeek V4 Flash模型的成本效益与任务完成能力表现如何?

A: 在Artificial Analysis综合榜单中,DeepSeek V4 Flash与GPT-4o mini轻量版得分均接近50分,已达前沿模型水平,但单任务成本仅0.03美元,远低于Kimi3等三T级以上模型的1至2美元。在Automation Bench等复杂场景基准中,DeepSeek得分为25.1%,该基准模拟47个企业SaaS工具的真实办公环境,通过检查数据同步、邮件发送等最终交付结果进行细粒度评分。

Q: DeepSeek模型在缓存效率与外部工具调用方面的实测表现如何?

A: 实测显示DeepSeek模型缓存命中率超过80%,大幅降低调用成本。虽无原生多模态能力,模型可通过调用外部工具完成浏览器操作、网页截图等任务,在MacBook环境下对原生浏览器与截图功能支持良好,验证了其通过工具链扩展复杂任务处理能力的可行性。

Q: 当前大模型评测基准的发展趋势与行业能力演进方向是什么?

A: 模型评测已从文本问答转向复杂沙盒环境,模拟真实办公系统,通过检查最终交付物进行多维度评分,需行业专家参与设计任务与评分标准。模型能力正从编程向通用办公及垂类场景渗透,闭源模型若能在复杂工具操作场景率先突破并建立显著优势,将维持技术领先与定价能力,避免陷入纯价格竞争。

来源:公开报道 | 整理:斧头财信

外媒原文 · 更多

📌 斧头财信 每日整理投行研报、机构纪要与外媒原文。微信搜索公众号「斧头财信」,输入 FTKX-GZH-3DAY 即可领取 3 天会员体验。