网易首页 > 网易号 > 正文 申请入驻

服贸观澜|方升-Code 2.0发布,大模型基准测试体系迎来新标准

0
分享至

2026年,AI大模型正从通用对话走向代码生成、智能体协作等产业落地场景,模型代码能力的标准化评估需求也日益凸显。


9月11日下午,中国信息通信研究院(以下简称"中国信通院")在2026年中国国际服务贸易交易会(以下简称"服贸会")智能原生软件变革与创新交流活动上,升级发布"方升-Code2.0"大模型基准测试体系。

"方升-Code"是中国信通院在工信部指导下研发的代码大模型基准测试体系。本次发布的2.0版,回应了当前AI代码评测体系在工程实践中暴露出的局限性。复旦大学计算与智能创新学院副院长、教授彭鑫指出,当前行业榜单繁荣,但很多评测集的初衷"是AI能力的练兵场,而非软件工程的试金石",且存在评测任务偏简单、数据质量不高、验证标准单一、缺少科学难度分级等问题。

针对上述问题,中国信通院人工智能所平台与工程化部主任曹峰介绍了方升-Code的建设思路。他表示,方升-Code面向能力发现与生产部署需求,核心要求是构念清晰、任务真实、测量稳定和有效性验证,旨在刻画模型能力边界,支撑模型研发与应用部署选型。目前,方升-Code基准测试已构建5000余条高质量、多任务的评测数据,所有数据均来自真实的软件研发项目。本次测试选取代码生成、代码问题解决、单元测试、研发问答四类典型任务,动态选取高、中、低不同难度等级测试数据287条。

彭鑫进一步介绍,方升-Code 2.0从单一正确率转向多维综合测量,评测指标体系包括代码能力表现、工程质量与实际价值、效率成本分析、过程表现衡量、能力稳定性等。未来评测数据集将持续更新,并针对重点测评任务种类的高难度任务进一步开展精细化难度分级,加强被测模型和Agent(智能体)的能力识别区分度。

曹峰指出,评测范式正由"代码能否生成"走向"复杂工程任务能否持续、稳定完成"。大模型能力竞争焦点不是"一套题得分更高",而是能否稳定完成更长、更复杂的真实研发任务。

工信部数据显示,2026年1-5月,我国软件业务收入约6.25万亿元,同比增长10.3%;截至6月,日均Token调用量已突破500万亿。

这一趋势也得到了政策层面的呼应。工业和信息化部近日印发的《"人工智能+软件"专项行动实施方案》提出,到2028年,累计组织实施100项软件企业智能化技改项目,在重点行业打造100个智能体软件标杆应用;到2030年,关键软件全面实现智能化升级,智能编程、智能体软件及智能服务等新业态成为产业新增长极。

中国信通院人工智能研究所平台与工程化部高级业务主管秦思思在分享中指出,智能原生软件正推动软件从"提供功能"向"理解目标、规划任务并自主执行"演进,软件产品的测试也将更加关注智能任务执行与结果质量。

"下一步,中国信通院将携手产业各界,继续构建能够科学反映人工智能在软件行业应用真实情况的评测体系,为我国政策制定和产业落地提供准确参考。"中国信通院人工智能研究所所长魏凯说道。

北京商报记者 魏蔚 实习记者 鲁芹

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
工信部点名:31家车企被曝生产一致性问题

工信部点名:31家车企被曝生产一致性问题

薛定谔的BUG
2026-09-11 18:07:37
中国最丰满的5位女星,美得各有千秋,她们的身材也太犯规了

中国最丰满的5位女星,美得各有千秋,她们的身材也太犯规了

叹为观止易
2026-09-11 00:22:25
孩子超市里喝光可乐后用空瓶结账,收银员认定是偷,要求十倍罚款,妈妈一招让老板道歉

孩子超市里喝光可乐后用空瓶结账,收银员认定是偷,要求十倍罚款,妈妈一招让老板道歉

菁妈育儿
2026-09-12 15:41:31
公安提醒:门外响起这5句话,千万别开门!危险往往就在开门一瞬间

公安提醒:门外响起这5句话,千万别开门!危险往往就在开门一瞬间

小虎新车推荐员
2026-09-01 00:57:45
韩国称目标是亚运连冠,中国台北是最大对手

韩国称目标是亚运连冠,中国台北是最大对手

林子说事
2026-09-12 12:22:49
间歇期后! 领头羊成都蓉城剩余比赛刚4场 但卫冕冠军海港是多达10场左右

间歇期后! 领头羊成都蓉城剩余比赛刚4场 但卫冕冠军海港是多达10场左右

80后体育大蜀黍
2026-09-12 16:03:45
WTT澳门冠军赛:陈幸同第3局连得8分!3-0冲4强,为王艺迪复仇?

WTT澳门冠军赛:陈幸同第3局连得8分!3-0冲4强,为王艺迪复仇?

刘姚尧的文字城堡
2026-09-12 20:07:10
个人军衔:争议最大的三位开国中将,个个都具备上将级别的军功

个人军衔:争议最大的三位开国中将,个个都具备上将级别的军功

大运河时空
2026-09-11 18:40:03
降价9万仍无人问津,库存超260万辆,经销商应该怎么跳出死循环?

降价9万仍无人问津,库存超260万辆,经销商应该怎么跳出死循环?

曹莽看世界
2026-09-10 15:44:41
今年秋季撞大运的3个生肖,贵人主动靠近,“财”来得又快又猛!

今年秋季撞大运的3个生肖,贵人主动靠近,“财”来得又快又猛!

毅谈生肖
2026-09-12 11:24:26
同日通报:两名省部级官员被双开,均涉受贿

同日通报:两名省部级官员被双开,均涉受贿

爬虫饲养员
2026-09-11 21:13:17
为什么烟草、铁路、邮政,不归国资委管?

为什么烟草、铁路、邮政,不归国资委管?

画生笔记
2026-09-06 12:19:58
好家伙‼️三大平台“王炸剧”激战酣畅淋漓,鹿死谁手拭目以待!

好家伙‼️三大平台“王炸剧”激战酣畅淋漓,鹿死谁手拭目以待!

草莓解说体育
2026-09-12 08:58:00
铁头被判8年,这就是爱国博主的真面目?

铁头被判8年,这就是爱国博主的真面目?

十柱
2026-09-12 15:42:08
AI数学的最后一道高墙,塌了!GPT-6 Astra刷穿FrontierMath Tier 4

AI数学的最后一道高墙,塌了!GPT-6 Astra刷穿FrontierMath Tier 4

量子位
2026-09-12 15:29:45
9月12日,南京2026年养老金调整通知正式公布了吗?很多人搞错了

9月12日,南京2026年养老金调整通知正式公布了吗?很多人搞错了

李博世财经
2026-09-12 09:59:46
马丁内斯:大胜后必须冷静谦逊,接下来要考虑德比

马丁内斯:大胜后必须冷静谦逊,接下来要考虑德比

赛场名场面
2026-09-12 19:58:25
导演自曝王凯看《交锋》剧本,立马打电话叫欧豪进组!原因搞笑

导演自曝王凯看《交锋》剧本,立马打电话叫欧豪进组!原因搞笑

小椰的奶奶
2026-09-12 19:56:25
真相来了!刘翔没签每年1300万终身合同 权威媒体:全世界仅4人

真相来了!刘翔没签每年1300万终身合同 权威媒体:全世界仅4人

念洲
2026-09-11 14:53:18
中国姐弟在智利被带进“假警局”勒索213万元:有人冒充FBI,现场还挂特朗普画像

中国姐弟在智利被带进“假警局”勒索213万元:有人冒充FBI,现场还挂特朗普画像

红星新闻
2026-09-12 17:03:09
2026-09-12 20:51:00
北京商报 incentive-icons
北京商报
北京商报社隶属于中共北京市委宣传部,由北京日报报业集团主管主办
294015文章数 300195关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

胖东来郑州店招聘尚未启动 网上有中介称花8万"包过"

头条要闻

胖东来郑州店招聘尚未启动 网上有中介称花8万"包过"

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

钟丽淇疑入ICU?聚会合照早露端倪

财经要闻

继房子茅台后 中产的第3个"神话"破灭了

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

房产
游戏
家居
健康
军事航空

房产要闻

别再等了!广州改善好房,正在进入“卖一套少一套”时代

你早就见过《GTA6》女主 她2019年还在赌场发牌

家居要闻

2026建博会(广州) 公装联探展交流活动

手脚发麻口齿不清?也可能是中风!

军事要闻

胡塞武装:9天攻占5400平方公里

无障碍浏览 进入关怀版