网易首页 > 网易号 > 正文 申请入驻

DeepSeek最新论文:如何让大模型跑得更快?梁文锋署名

0
分享至

当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让模型更快。

6月27日,DeepSeek官方在Github低调更新了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,DeepSeek创始人梁文锋也位列作者名单。在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。


DeepSeek最新论文截图

此次论文仍是DeepSeek一贯的技术派风格,论文标题就较为晦涩——《DSpark:基于置信度调度的半自回归生成推测解码》(《DSpark:Confidence-Scheduled Speculative Decoding with Semi-Autoregressive Generation》)。

在论文中,DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元(token)的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归架构,通过两套互补机制,解决草稿生成与校验环节的权衡矛盾,将高吞吐并行生成与自适应负载感知校验机制融为一体。

根据论文,在数学推理、代码生成、日常闲聊三类任务的受控离线基准测试中,相较于自回归草稿模型与并行草稿模型,Dspark框架能够大幅提升单轮平均可接受词元长度。

DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

从技术角度来看,这篇论文的主要价值在于,通过算法创新显著提升了模型的推理生成速度。在当前大模型行业逐渐走向落地的背景下,谁能更便宜、更快速地输出结果,也是一项重要的竞争力。此外,通过开源,DeepSeek也再次推动了社区发展。

“AI Infra再次被DeepSeek加速了。”在社交平台,有开发者评价道。也有用户认为,DeepSeek最让人佩服的点在于,模型迭代的同时,推理基础设施也在同步更新,发布V4时,连推理优化一起发,有论文也有代码,还验证了跨模型通用性。

即便近期频频传出融资消息,未来可能需要走向商业化,但通过这一开源,DeepSeek似乎在证明自己仍会坚持开源初心。

责任编辑:李曦_NN2587

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
网红峡谷5人溺亡,“涨水后几乎没有撤退空间”

网红峡谷5人溺亡,“涨水后几乎没有撤退空间”

中国新闻周刊
2026-06-29 22:44:39
鞭尸!洪明浦辞职后双手插兜举止轻浮,红魔天团要求永久退出足坛

鞭尸!洪明浦辞职后双手插兜举止轻浮,红魔天团要求永久退出足坛

新杀猪的秀才
2026-06-29 10:50:11
记者:热苏斯在试探性地接触热苏斯,球员夏窗有可能离队

记者:热苏斯在试探性地接触热苏斯,球员夏窗有可能离队

懂球帝
2026-06-29 22:33:07
天天锻炼不等于长寿,专家忠告:年过60,只适合三种运动方式

天天锻炼不等于长寿,专家忠告:年过60,只适合三种运动方式

坠入二次元的海洋
2026-06-29 12:54:46
把瑜伽裤穿成日常的松弛感美女

把瑜伽裤穿成日常的松弛感美女

只要高兴就好
2026-04-13 14:30:30
88年越战,向小平让一名越军逃跑了,事后却受到重大的表扬

88年越战,向小平让一名越军逃跑了,事后却受到重大的表扬

历史龙元阁
2026-06-29 11:40:21
走个面、假慈善?被官方“点名”的韩红,如今用4000万让黑粉打脸

走个面、假慈善?被官方“点名”的韩红,如今用4000万让黑粉打脸

小椰的奶奶
2026-06-29 19:11:37
印度开造时速350公里高铁,比拼中国复兴号,还准备向全球出售!

印度开造时速350公里高铁,比拼中国复兴号,还准备向全球出售!

苗苗情感说
2026-06-30 01:21:09
日本预测,未来20年亚洲最发达的“四座城市”,我国几座榜上有名

日本预测,未来20年亚洲最发达的“四座城市”,我国几座榜上有名

牛牛叨史
2024-07-19 23:32:16
亲华总统当众辞职,感谢中国承诺不改变对华政策

亲华总统当众辞职,感谢中国承诺不改变对华政策

全球风情大揭秘
2026-06-30 00:57:06
美军攻击伊朗革命卫队后,霍尔木兹海峡的航运交通顺畅很多

美军攻击伊朗革命卫队后,霍尔木兹海峡的航运交通顺畅很多

一种观点
2026-06-29 15:21:59
原来王菲这次是故意的,谢霆锋摊上事了,张柏芝的选择好聪明

原来王菲这次是故意的,谢霆锋摊上事了,张柏芝的选择好聪明

橙星文娱
2026-06-29 12:11:10
中国菲律宾在黄岩岛发生武装对峙

中国菲律宾在黄岩岛发生武装对峙

凤眼论
2026-06-25 18:45:27
为什么29.99万的越野车敢对标路虎卫士?

为什么29.99万的越野车敢对标路虎卫士?

爬虫饲养员
2026-06-28 02:10:23
前克林顿政府官员公开发声,剑指特朗普政府:必须逮捕马斯克

前克林顿政府官员公开发声,剑指特朗普政府:必须逮捕马斯克

云上乌托邦
2026-06-29 21:05:02
恶魔施纯芳被押解回国等待宣判!他的妻子和父母觉得自己很无辜

恶魔施纯芳被押解回国等待宣判!他的妻子和父母觉得自己很无辜

细品名人
2026-06-23 07:22:50
速报!龟梨和也、田中美奈实官宣奉子成婚!又一对高颜值cp迎来了纯爱大结局!

速报!龟梨和也、田中美奈实官宣奉子成婚!又一对高颜值cp迎来了纯爱大结局!

东京新青年
2026-06-29 16:48:12
普京透露俄军正快速推进:俄军距斯拉维扬斯克仅8公里,在苏梅州的目标是建立安全缓冲区,康斯坦丁诺夫卡市已有96%的区域处于俄军控制之下

普京透露俄军正快速推进:俄军距斯拉维扬斯克仅8公里,在苏梅州的目标是建立安全缓冲区,康斯坦丁诺夫卡市已有96%的区域处于俄军控制之下

扬子晚报
2026-06-29 12:05:42
历史第二惨淡!本届世界杯证明,绝大多数亚洲人真不适合对抗踢球

历史第二惨淡!本届世界杯证明,绝大多数亚洲人真不适合对抗踢球

许礆很机智
2026-06-29 12:20:06
山西王阎锡山的妹妹,没来得及跟哥哥逃到台湾,她的结局如何呢?

山西王阎锡山的妹妹,没来得及跟哥哥逃到台湾,她的结局如何呢?

芊芊子吟
2026-06-10 11:55:08
2026-06-30 03:00:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
257594文章数 622858关注度
往期回顾 全部

科技要闻

杀疯了!深圳一天出两家200亿具身智能公司

头条要闻

美从俄乌战场抽身 金灿荣:美国有个大战略目标已完成

头条要闻

美从俄乌战场抽身 金灿荣:美国有个大战略目标已完成

体育要闻

他和伊朗队,再次赢得全世界的尊重

娱乐要闻

跟风电影《给阿公的牛肉丸》开机

财经要闻

万达广场批量易主 多位投资人正式入局

汽车要闻

全新宝马iX3长轴版将于成都车展预售 四季度交付

态度原创

数码
教育
游戏
本地
手机

数码要闻

小米澎湃OS六月迎来功能更新 超级小爱新增赛事服务

教育要闻

农村女孩高考699分,接到清华电话!

魔坛节奏丨Life带病擒Happy,Sky队后来居上晋级全能王决赛

本地新闻

贵州小城的新目标:举办“村超”世界杯!

手机要闻

华为nova17 Air曝光:7000mAh电池+16:10阔直屏,要搅局中端市场

无障碍浏览 进入关怀版