网易首页 > 网易号 > 正文 申请入驻

DeepSeek V3获竞技场最强开源认证!与Claude 3.5 Sonnet实测来了

0
分享至

国产之光DeepSeek V3竞技场排名新鲜出炉——

优于o1-mini(总榜第7),获最强开源模型认证(也是唯一闯入前10的开源模型)。



单项上,在困难提示、编程、数学,写作等方面全面超越Claude 3.5 Sonnet



不过,如果设置了风格控制,Claude 3.5 Sonnet在理解困难提示方面还是要略胜一筹。

(风格控制:剔除模型通过长篇且格式良好的回复来迎合人类偏好)



由此也引发两边支持者激烈的争论:

DeepSeek V3在实际编码中真的比Claude 3.5 Sonnet强吗?



带着同款好奇,量子位&网友实测这就奉上。



实测DeepSeek V3和Sonnet 3.5

经典脑筋急转弯

第一关先来个开胃小菜,一道经典脑筋急转弯考查模型理解能力。

小明的妈妈有三个孩子,老大叫一明,老二叫二明,老三叫什么?

DeepSeek V3回答正确。它先明确了题目要求,然后逻辑满分找出了正确答案(甚至还有自我验证)。



相比之下,Claude 3.5 Sonnet既正确又简洁。



当然,考虑到脑筋急转弯这种东西也受东西文化差异影响,我们再来一道。

why are people tired on April Fool’s Day?(为什么人们在愚人节很累?)
答案一般是“Because they have just had a long March”。因为他们刚度过了一个很长的三月(行军),March除了三月还有行军的意思,这里考察对双关的理解。

好嘛,DeepSeek V3果然歇菜了。从部分回答来看,它完全误解了题目意图,一本正经地回答是因为人们感到焦虑、熬夜之类。



而Claude 3.5 Sonnet稳稳守住了主场,也是轻轻松松get了双关。



显而易见,Claude 3.5 Sonnet在第一关小试牛刀中全胜,而DeepSeek V3可能更偏向中文语境。

弱智吧逻辑陷阱+反转诅咒

接下来难度升级,利用弱智吧经典陷阱来考查模型逻辑能力。

台上一分钟,台下十年功,为何不在台上练功?

很好,DeepSeek V3又掉线了,精准踩进人类陷阱。(正能量满满可还行)



不过别担心,你的难兄难弟Claude 3.5 Sonnet来陪你了(doge)。



看来面对充满心机的弱智吧问题,二位选手都不在状态。

Okk,不继续在这上面为难二位了,下面来一道正儿八经的“反转诅咒”(即知道A是B却不知道B是A)问题。

而两位选手都一次性答对了Mary Lee Pfeiffer(汤姆·克鲁斯的母亲)的儿子是谁。





考研数学真题

下面进入数学能力测试。比如这道考研数学真题,涉及的知识点是曲面积分、高斯定理等内容:



直接上传截图,DeepSeek V3还是详细按步骤解答,而且也做对了。



而Claude 3.5 Sonnet虽然看起来方法更简单,但最终答案错误,功亏一篑。



编码能力

重头戏来了,最后来考查一下模型编码能力。

刚好有位网友拿DeepSeek V3和Claude Sonnet 3.5进行了测试,在Scroll Hub中分别用它俩创建网站



博主在测试之后,认为DeepSeek V3完全胜出

小结一下,从有限测试来看,DeepSeek V3貌似确实能和Claude Sonnet 3.5打得有来有回。



满血版o1空降第一

BTW,随着DeepSeek V3竞技场排名一起变动的,还有OpenAI的o1模型。

估计是“双十二”期间正式上线的满血版o1,此次超越o1-preview 24分,空降总榜第一。

而且除了创意写作,各个单项都是第一。



所以,对于这几家,大家在使用过程中感受如何呢??



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
被列入实体清单后,中企蔑视美禁令,白宫气坏:前所未有的耻辱!

被列入实体清单后,中企蔑视美禁令,白宫气坏:前所未有的耻辱!

橘色数码
2025-01-06 11:15:08
定了!格里芬正式签约加盟!以绿凯身份告别NBA……

定了!格里芬正式签约加盟!以绿凯身份告别NBA……

篮球实战宝典
2025-01-06 20:36:06
乌军在库尔斯克方向控制区域扩大!泽连斯基开出停火条件,还称很想参加特朗普就职典礼

乌军在库尔斯克方向控制区域扩大!泽连斯基开出停火条件,还称很想参加特朗普就职典礼

每日经济新闻
2025-01-06 19:14:34
魔兽世界:玩家天塌了,绑定网易账号被要求补900元,这是为什么

魔兽世界:玩家天塌了,绑定网易账号被要求补900元,这是为什么

游戏农工
2025-01-07 02:32:07
不能留!曼联尝到甜头,阿莫林已经做出选择,轮到利物浦了

不能留!曼联尝到甜头,阿莫林已经做出选择,轮到利物浦了

嗨皮看球
2025-01-06 17:04:57
日媒:日本汽车零部件制造商爱信社长称,“要学习中国制造的优势”

日媒:日本汽车零部件制造商爱信社长称,“要学习中国制造的优势”

环球网资讯
2025-01-06 16:04:11
稳了!2024年,江苏GDP将突破13万亿大关,广东能突破14万亿吗

稳了!2024年,江苏GDP将突破13万亿大关,广东能突破14万亿吗

葡萄说史
2025-01-06 13:46:49
令人痛心!2025年不到5天,五位名人相继离世,最小者年仅25岁!

令人痛心!2025年不到5天,五位名人相继离世,最小者年仅25岁!

祝晓塬
2025-01-05 16:08:10
金庸失败的教育:长子19岁自缢,次子有盗窃习惯,长女天生无听觉

金庸失败的教育:长子19岁自缢,次子有盗窃习惯,长女天生无听觉

书中自有颜如玉
2025-01-05 22:38:51
2025上海家电以旧换新补贴政策

2025上海家电以旧换新补贴政策

小兔子发现大事情
2025-01-06 20:49:03
压岁钱是除夕给还是初一给,两者区别很大,快过年了千万别弄错

压岁钱是除夕给还是初一给,两者区别很大,快过年了千万别弄错

风语励志情
2025-01-06 17:40:54
在婚外的感情中,两个人一旦发生了关系,就只有三个选择

在婚外的感情中,两个人一旦发生了关系,就只有三个选择

加油丁小文
2025-01-02 05:13:51
上海互联网企业“一哥”:领先携程、B站,去年九个月净赚850亿元

上海互联网企业“一哥”:领先携程、B站,去年九个月净赚850亿元

蜉蝣说
2025-01-06 11:10:11
山西垣曲交警通报“一道路立杆上摄像头密集”:不存在过度抓拍

山西垣曲交警通报“一道路立杆上摄像头密集”:不存在过度抓拍

新京报
2025-01-06 08:04:00
“求饶”已经晚了!沉默11天后,国防部发声!解放军上演震撼一幕

“求饶”已经晚了!沉默11天后,国防部发声!解放军上演震撼一幕

星辰故事屋
2025-01-04 16:48:15
076刚下水,中方接到大单,非洲土豪一下订6艘护卫舰,还想自己造

076刚下水,中方接到大单,非洲土豪一下订6艘护卫舰,还想自己造

兵说
2025-01-05 19:43:01
亿万少女的梦中情人费翔,和杨澜同居2年,只有4段情史,终身未娶

亿万少女的梦中情人费翔,和杨澜同居2年,只有4段情史,终身未娶

陈天宇
2025-01-02 10:31:09
明日腊八节,提醒“1不去,2不吃,4不做”,快快告诉家人

明日腊八节,提醒“1不去,2不吃,4不做”,快快告诉家人

牛锅巴小钒
2025-01-07 00:43:31
江西千万富豪回乡创业,遭套路倾家荡产,羁押后心脏病猝死

江西千万富豪回乡创业,遭套路倾家荡产,羁押后心脏病猝死

一度历史观
2024-07-06 12:37:55
❌西媒:范迪克愿今夏自由身加盟皇马,但遭到后者拒绝

❌西媒:范迪克愿今夏自由身加盟皇马,但遭到后者拒绝

直播吧
2025-01-06 23:07:06
2025-01-07 04:16:49
量子位 incentive-icons
量子位
追踪人工智能动态
9876文章数 175833关注度
往期回顾 全部

科技要闻

国内至少50团队研发AI眼镜 但无核心卖点

头条要闻

特鲁多辞去加拿大自由党领袖一职 新党首将成加总理

头条要闻

特鲁多辞去加拿大自由党领袖一职 新党首将成加总理

体育要闻

阿诺德的心飞到马德里了?

娱乐要闻

星星女友辟谣!还未取得联系

财经要闻

瑞立科密销售模式信披或"偷梁换柱"

汽车要闻

10万元级无图智驾 悦也PLUS全路况实测

态度原创

艺术
房产
手机
本地
公开课

艺术要闻

故宫珍藏的墨迹《十七帖》,比拓本更精良,这才是地道的魏晋写法

房产要闻

中交 × 鱼珠 | 高定江景梦幻联动,打造都市精英的 “临江乌托邦”

手机要闻

iQOO Neo11再次被确认:金属机身+双芯架构,主打游戏方向!

本地新闻

云游中国|冰雪“祁”缘照进现实,谁懂多震撼

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版