网易首页 > 网易号 > 正文 申请入驻

乒乓球版 AlphaGo 赢了人类!正反手灵活转换,擦网球高球都能接,专业教练:达到中级选手水平

0
分享至

白交 西风 发自 凹非寺
量子位 | 公众号 QbitAI

在刚刚结束的巴黎奥运会乒乓球比赛中,中国乒乓球队获得5金1银,包揽了今年奥运会乒乓球项目里全部五枚金牌,实现了团体项目五连冠,捍卫了国乒荣耀!

而就在上周,Deepmind 也发布了最新的论文预印本,标题高调地写到:实现人类水平的竞技乒乓球机器人。第一作者 David B. D’Ambrosio,从 2019 年起就以乒乓球作为切入点研究运动机器人,连续几年都盯着这个项目。

首个达到人类竞技水平的机器人Agent发布!

你看一个没留神,就赢了专业教练一个球!

正反手快速转换,连续进攻也是不在话下~

面对一些突发战术,比如长球高球擦网球,也能沉稳应对。

实际测试中,机器人实时适应不同选手风格,最终赢下了与初学者的所有比赛,同中级玩家对打也有55%的胜率。

小小乒乓球,拿下!

与它对阵的美国乒乓球明星Barney J. Reed给予了高度评价:超出预期,这个机器人已经达到中级水平

看完它的表现,网友们纷纷表示:可以买吗?想要。

遭遇战也能从容应对

乒乓球是一项对体力和战略、技巧等各方面综合要求很高的运动,人类也往往要经过多年训练才能掌握。

因此,不同于像象棋、围棋这种纯战略游戏,对于机器人而言,乒乓球成为考验其综合能力的重要基准,比如高速运动、实时的精准控制、战略决策、系统设计等等。

举个例子,面对球的不同落点,机器人需要快速移动位置;面对明显的出界球,机器人应该选择不接。

团队找到了29个不同技能水平的乒乓球运动员进行了比赛,包括初学者、中级、高级和高级以上。

人类与机器人进行了3场比赛,比赛遵循标准乒乓球规则。(不过由于机器人无法发球,整场由人类来发球)

在此之前,其实也有相应的乒乓球机器人研究,此次谷歌机器人的特别之处在于,它能够同从未见过的人类进行全面的竞技对决。

人类的各种打球风格,它都能快速适应。

比如看这位选手,比赛刚开局机器人明显还在适应过程中,人类以9比2的大比分击败机器人。

但就在下一局之后,机器人明显熟悉了对手风格,始终在紧紧追着比分。双方打得也是有来有往。

最终在所有对手中,机器人赢得了所有初学者比赛,在与中级选手的比赛中胜率为55%。

虽然目前机器人还没有办法战胜高级选手,但在人类的各种反馈中,可以看到,大家都很乐意同这个机器人玩耍。

小小乒乓球,如何拿下?

在介绍方法前,先来看一眼乒乓球机器人的硬件配置。

主体采用的是6自由度的瑞士公司ABB 1100机械臂,装置在两个Festo直线导轨上,使其能够在平面内移动。横向移动导轨长4米,纵向移动导轨长2米。

机械臂上装配了一个3D打印的球拍手柄和一个覆盖短颗粒胶皮的球拍。

就是这么个小登西,是如何学会打乒乓球的?

总结来说,使用了结合强化学习模仿学习的混合训练方法。

团队设计了分层和模块化的策略架构,Agent包括一个低级技能库(LLC)和一个高级控制器(HLC)。

LLC是一组专门的策略,每个策略都经过训练来执行特定的乒乓球技能,如正手击球、反手击球、发球等。这些LLC使用CNN架构,通过仿真环境中的进化策略算法进行训练。

训练过程采用了从真实世界收集的球状态数据集,以确保模拟环境与真实环境的一致性。

而HLC负责在每次来球时选择最合适的LLC

包含多个组件:风格策略,用于选择正手或反手;旋转分类器,用于识别来球的旋转类型;LLC技能描述符,描述每个LLC的能力;一组启发式策略,用于根据当前情况shortlist候选LLC。

HLC还使用在线学习的LLC偏好来适应对手的特点和弥补仿真到现实的差距。

具体来说,团队先是收集了少量人类比赛数据,设置初始化任务条件,然后用强化学习在模拟环境中训练一个Agent,再将策略零样本部署到真实世界中。

其中使用MuJoCo物理引擎精确模拟球和机器人动力学,包括空气阻力、Magnus效应等,还设计处理了上旋球“校正”,通过在仿真中切换不同的球拍参数来模拟真实世界中的上旋和下旋效果。

在Agent和人类不断对打的过程中,可以生成更多的训练任务条件,并重复训练-部署。

机器人技能逐渐提升,比赛也逐渐变得复杂,但仍基于现实世界的任务条件。机器人收集完数据,还能发现其能力的不足,随后通过在模拟环境中持续训练来弥补这些缺陷。

通过这种方法,机器人的技能可以在模拟与现实相结合的循环过程,自动迭代改进。

此外,这个机器人还能追踪对手的行为和打法来适应不同的对手,比如对手倾向于将球打回桌子的哪一。

由此能够尝试不同的技巧,监控自己的成功率,并实时调整策略。

在和人类对打实验中,团队也发现这个机器人有个弱点:不擅长处理下旋球。

按照对球旋转的估计,绘制机器人的上台率图,结果当面对更多下旋球时,其上台率显著下降。

研究人员表示,机器人在处理弧线低且接近球桌的球时,为避免撞击到球桌,很难处理好,而且在实时确定球的旋转类型上也存在局限。

搞乒乓球机器人,谷歌不是第一次

研究机器人打乒乓球,谷歌很久前就开始了。团队相关研究还有一箩筐:

比如谷歌之前的i-Sim2Real研究中,训练的机器人与人类打球,最多可连续打340次不落地,相当于连续打了4分钟+。

其他团队也有过乒乓球机器人,比如这样婶儿的,还能发球:

以及像日本国家队和中国台湾的队伍,也都有拿机器人来陪练自家奥运选手。

那么有小伙伴就疑惑了,跟谷歌此次发布的机器人有什么区别?

有网友给出了解释:

谷歌这次是关于AI Agent,通过视频输入来工作,而非预编程算法。

所以,什么时候能看到跟咱们国家队对打?(Doge)

项目主页:
https://sites.google.com/view/competitive-robot-table-tennis/home?utm_source&utm_medium&utm_campaign&utm_content&pli=1

参考链接:
[1]https://x.com/GoogleDeepMind/status/1821562365931855970
[2]https://x.com/arankomatsuzaki/status/1821360354653344190
[3]https://x.com/lgraesser3/status/1547942995139301376
[4]https://www.reddit.com/r/singularity/comments/1en8vrg/google_deepminds_aipowered_robot_plays_table/
[5]https://www.youtube.com/watch?v=u3L8vGMDYD8

本文转载自《量子位 》微信公众号

《物理》50年精选文章

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
深圳街头无人面馆仅需48秒就能出品一碗,价值33万机器人现做9.9元面,没有感情全是效率

深圳街头无人面馆仅需48秒就能出品一碗,价值33万机器人现做9.9元面,没有感情全是效率

界面新闻
2025-03-07 18:55:05
越南10万公务员下岗:刀刃向内的突围

越南10万公务员下岗:刀刃向内的突围

难得君
2025-03-07 10:13:29
不要一国两制,那就一国一制!王毅明确发声,台湾回归日不远了

不要一国两制,那就一国一制!王毅明确发声,台湾回归日不远了

说天说地说实事
2025-03-07 22:12:52
3月7日俄乌最新:载入史册的一天

3月7日俄乌最新:载入史册的一天

西楼饮月
2025-03-07 21:23:08
河南段医生轻生去世,自行注射氯化钾,年仅25岁,因压力大!

河南段医生轻生去世,自行注射氯化钾,年仅25岁,因压力大!

说点真嘞叭
2025-03-08 07:27:13
特斯拉爆降4.8万!Model Y闪降至20.19万,比亚迪闻风丧胆!

特斯拉爆降4.8万!Model Y闪降至20.19万,比亚迪闻风丧胆!

爱论历史
2025-03-08 12:15:55
奥斯卡影帝吉恩·哈克曼和妻子死因公布 非常悲惨

奥斯卡影帝吉恩·哈克曼和妻子死因公布 非常悲惨

Lee奇奥哦
2025-03-08 10:14:11
首战必胜!幻影战机一天2战:凌厉反击大规模空袭,远程摧毁雷达

首战必胜!幻影战机一天2战:凌厉反击大规模空袭,远程摧毁雷达

大风文字
2025-03-08 09:38:13
翻脸堪比翻书!川普宣布重新支持乌克兰,美国纠错机制起关键作用

翻脸堪比翻书!川普宣布重新支持乌克兰,美国纠错机制起关键作用

小鬼头体育
2025-03-08 00:25:59
状态火热!郑钦文开局3-0最终6-3阿扎伦卡赢首盘,大比分1-0领先

状态火热!郑钦文开局3-0最终6-3阿扎伦卡赢首盘,大比分1-0领先

直播吧
2025-03-08 13:57:55
外媒爆:库尔斯克乌军处境急剧恶化,可能在两周内放弃军事行动

外媒爆:库尔斯克乌军处境急剧恶化,可能在两周内放弃军事行动

环球网资讯
2025-03-08 12:21:17
曝知名相声演员落魄卖草莓,曾退出德云社,如今路人合影得买两盒

曝知名相声演员落魄卖草莓,曾退出德云社,如今路人合影得买两盒

阿伧说事
2025-03-07 23:56:58
78万正规军阵亡,单日伤亡高达4.5万,总统王牌军20万人被扑杀

78万正规军阵亡,单日伤亡高达4.5万,总统王牌军20万人被扑杀

寒山远殆
2025-03-07 20:42:52
开售36小时卖了380台问界!余承东深夜去该博主抖音直播间表感谢

开售36小时卖了380台问界!余承东深夜去该博主抖音直播间表感谢

火山诗话
2025-03-08 10:14:20
国家给每位农村老人上涨20元,想不到却迎来了众多网友的冷嘲热讽

国家给每位农村老人上涨20元,想不到却迎来了众多网友的冷嘲热讽

逍遥论经
2025-03-08 09:05:58
侯佩岑表态“台湾唯一称谓是中国台湾省”,引来岛内媒体集火攻击

侯佩岑表态“台湾唯一称谓是中国台湾省”,引来岛内媒体集火攻击

史行途
2025-03-08 10:53:30
网友:太痛了!今天下午想必合肥九年级家长,都收到紧急开会通知

网友:太痛了!今天下午想必合肥九年级家长,都收到紧急开会通知

火山诗话
2025-03-08 08:13:15
湖南一位炒股奇才,从2012年50万入市一直炒股至今赚得亿万身家!

湖南一位炒股奇才,从2012年50万入市一直炒股至今赚得亿万身家!

一方聊市
2025-03-07 08:46:00
人民大会堂不许化妆,没了团队包装和精修图,遍地都是普男普女?

人民大会堂不许化妆,没了团队包装和精修图,遍地都是普男普女?

趣文说娱
2025-03-07 14:18:35
快船送尼克斯3连败:哈登27+7 小卡复出20+7+6迎里程碑

快船送尼克斯3连败:哈登27+7 小卡复出20+7+6迎里程碑

醉卧浮生
2025-03-08 13:53:34
2025-03-08 15:31:00
中国物理学会期刊网 incentive-icons
中国物理学会期刊网
最权威的物理学综合信息网站
3611文章数 21814关注度
往期回顾 全部

体育要闻

西部第2+防守第1 还有人黑湖人四手连摊?

头条要闻

牛弹琴:特朗普破天荒1天搞了3件事 突然开始威胁俄方

头条要闻

牛弹琴:特朗普破天荒1天搞了3件事 突然开始威胁俄方

娱乐要闻

陈晓被逼净身出户,还是低估了陈妍希

财经要闻

李嘉诚卖港口背后,危险正在悄悄酝酿

科技要闻

华为,组建新军团!

汽车要闻

奇瑞集团全球化布局为中国车企出海“打个样”

态度原创

游戏
艺术
亲子
数码
公开课

《彩虹六号:围攻X》据称将包含全新6v6模式

艺术要闻

故宫珍藏的墨迹《十七帖》,比拓本更精良,这才是地道的魏晋写法

亲子要闻

多指6个月做?1岁做?3岁做?你是专业的,我们相信你!

数码要闻

3000元内游戏CPU谁称王?锐龙7 7800X3D实力完胜i9-14900K!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版