DeepMind机器人打乒乓球，正手、反手溜到飞起，全胜人类初学者

0 分享至

用微信扫码二维码

分享至好友和朋友圈

机器之心报道

编辑：小舟、机器陈陈

但可能打不过公园里的人打老大爷？

巴黎奥运会正在如火如荼地进行中，乒乓球项目备受关注。乒乓与此同时，球正起全机器人打乒乓球也取得了新突破。手反手溜胜人

刚刚，到飞DeepMind 提出了第一个在竞技乒乓球比赛中达到人类业余选手水平的类初学习型机器人智能体。

论文地址：https://arxiv.org/pdf/2408.03906

DeepMind 这个机器人打乒乓球什么水平呢？大概和人类业余选手不相上下：

正手反手都会：

对手采用多种打法，该机器人也能招架得住：

接不同旋转的人打发球：

不过，比赛激烈程度似乎不如公园老大爷对战。乒乓

对机器人来说，球正起全乒乓球运动需要掌握复杂的手反手溜胜人低水平技能和策略性玩法，需要长期训练。到飞DeepMind 认为战略上次优但可以熟练地执行低水平技能可能是类初更好的选择。这使乒乓球与国际象棋、机器围棋等纯粹的战略游戏区分开来。

因此，乒乓球是提升机器人能力的一个有价值的基准，包括高速运动、实时精确和战略决策、系统设计以及与人类对手直接竞争。

对于这一点，Google DeepMind 首席科学家称赞道：「乒乓球机器人将有助于我们解决高速控制和感知问题。」

该研究进行了 29 场机器人与人类的乒乓球比赛，其中机器人获胜 45% (13/29)。所有人类选手都是机器人未见过的玩家，从初学者到锦标赛选手能力不等。

虽然该机器人输掉了所有与最高级别玩家的比赛，但它赢得了 100% 的与初学者的比赛，在与中级选手的对战中赢得了 55% 的比赛，展现出人类业余选手的水平。

总的来说，该研究的贡献包括：

1. 提出一个分层和模块化的策略架构，其中包括：
2. 低级控制器及其详细的技能描述器，这些描述器对智能体的能力进行建模并有助于弥合模拟与真实的差距；
3. 选择低级技能的高级控制器。
4. 实现零样本模拟到真实的技术，包括定义基于现实世界的任务分布的迭代方法，并定义自动课程（automatic curriculum）。
5. 实时适应未见过的对手。

方法介绍

该智能体由一个低级技能库和一个高级控制器组成。低级技能库专注于乒乓球的某个特定方面，例如正手上旋球、反手瞄准或正手发球。除了包含训练策略，该研究还在线下和线上收集和存储有关每个低级技能的优势、劣势和局限性的信息。而负责协调低级技能的高级控制器会根据当前游戏统计数据、技能描述选择最佳技能。

此外，该研究还收集了少量的人类和人类对打的比赛数据，作为初始任务条件的种子，数据集包括位置、速度和旋转的信息。然后使用强化学习在模拟环境中训练智能体， 并采用一些现有技术，将策略无缝部署到真实硬件中。

该智能体与人类一起对打以生成更多训练数据，随着机器人的持续学习，游戏标准变得越来越复杂，以此让智能体学习越来越复杂的动作。这种混合的「模拟 - 现实」循环创建了一个自动教学，使机器人的技能随着时间的推移不断提高。

分层控制

分层控制主要包含以下部分：

• 乒乓球打法：高级控制器（HLC，high-level controller）首先决定使用哪种打法（正手还是反手）；
• 调整：根据与对手比赛中的统计数据，在线维护每个 HLC 的偏好（H 值）；
• 选择最有效的技能：HLC 根据调整后的 H 值对入围的 LLC 进行抽样；
• 更新：H 值和对手统计数据会持续更新，直至比赛结束。

结果

研究者将该智能体与 29 名不同水平的乒乓选手进行了对比，选手包括初学者、中级、高级和高级 + 技能。人类选手按照标准乒乓球规则与机器人进行了三场比赛，但由于机器人无法发球，因此规则稍作修改。

面对所有对手，机器人赢得了 45% 的比赛（match）和 46% 的单局胜利（game）。按照技能水平细分，机器人赢得了与初学者的所有比赛，输掉了与高级和高级 + 选手的所有比赛，赢得了 55% 与中级选手的比赛。这表明该智能体在乒乓球回合中达到了中级人类选手的水平。

机器人打不过高级玩家的原因在于物理和技术的限制，包括反应速度，相机感应能力，旋转处理等，这是很难在模拟环境中准确建模的。

与机器人对打，也很吸引人

研究参与者表示，他们非常享受与机器人一起对打，并在「有趣」和「吸引人」方面给予了机器人很高的评价。他们也一致表示「非常愿意」再次与机器人对打。在自由时间里，他们平均在 5 分钟的时间里与机器人玩了 4 分 06 秒。

机器人不擅长下旋球

技能最好的参与者提到，机器人不擅长处理下旋。为了测试这一观察结果，研究人员根据球的旋转绘制了机器人的着陆率，根据结果可以看到，机器人在面对更多的下旋球时，着陆率大幅下降。这一缺陷部分是由于机器人在处理低球时，为了避免与桌子碰撞导致的，其次是实时确定球的旋转确实很难。

https://sites.google.com/view/competitive-robot-table-tennis/home?utm_source&utm_medium&utm_campaign&utm_content&pli=1

特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

/阅读下一篇/返回网易首页 下载网易新闻客户端 相关推荐 热点推荐

• 

  “地表最强人形机器人”Figure02升级首秀，OpenAI大模型加持，现已在宝马打工

  量子位 2024-08-07 15:08:55

  11 跟贴11
• 

  练习时长两年半，机器人转笔大师诞生！ 不同粗细、不同重量的笔，甚至是针筒都转得非常丝滑，它是怎么做到

  量子位 2024-08-05 15:34:26

  0 跟贴0
• 

  搭载ChatGPT的《星际穿越》机器人爆火，马斯克：想要！ ChatGPT复刻版《星际穿越》机器人T

  量子位 2024-07-09 12:03:11

  64 跟贴64
• 

  全世界跑得最快的人形机器人，还能跳科目三 都知道波士顿动力的机器人会空翻，那你知道中国品牌宇树科技有

  爱范儿 2024-07-04 20:41:36

  6139 跟贴6139
• 

  陶哲轩牛津对谈罗博深：解密DeepMind如何让AI拿到IMO银牌

  新智元 2024-08-08 12:36:28

  11 跟贴11
• 

  吴恩达亲自授课，LLM当助教，适合初学者的Python编程课程上线

  机器之心Pro 2024-08-08 18:33:27

  7 跟贴7
• 

  趴在肩膀上的机器人火爆TikTok，网友：这才是AI硬件未来 会开灯会讲冷笑话，还自带激光器，求求赶

  量子位 2024-08-09 10:22:53

  0 跟贴0
• 

  AI三重劫

  钛媒体APP 2024-06-24 12:21:18

  0 跟贴0
• 

  这个机器人的手真的太灵活了！ 收纳、撸猫、修剪绿植样样都行，原速演示流畅程度堪比人类。 这是星动纪

  爱范儿 2024-05-17 16:21:21

  0 跟贴0
• 

  AI绘画新黑马！SD原班人马打造，效果逼真火爆刷屏 这个新AI名叫FLUX，效果媲美Midjourn

  量子位 2024-08-07 10:20:49

  0 跟贴0
• 

  大疆前高管带6人创业，做出了类目Top1的割草机器人

  钛媒体APP 2024-05-30 14:49:18

  0 跟贴0
• 

  三「模」联盟，谷歌DeepMind缔造终身学习智能体！

  新智元 2024-08-07 12:32:40

  11 跟贴11
• 

  Python爆火可视化插件来了！拖拽就成动态GUI，一行代码都不用，真·数据科学神器

  量子位 2024-07-17 15:28:33

  0 跟贴0
• 

  OpenAI，雪崩开始了吗？

  钛媒体APP 2024-08-08 08:02:28

  221 跟贴221
• 

  AI时代，谁还没用AI智能硬件提升工作效率？

  量子位 2024-05-15 18:09:32

  0 跟贴0
• 

  抢疯了，腾讯给大模型人才，定了一个前所未有的标准

  机器之心Pro 2024-06-21 15:20:08

  74 跟贴74
• 

  一口气看完 WAIC百度智能云展台 WAIC现场百度智能云大秀绝活，一句话生成数字人，超低门槛搭建应

  量子位 2024-07-08 19:49:57

  0 跟贴0
• 

  被AI量产的短视频营销号气疯了，于是，我也做了一个

  量子位 2024-06-20 18:31:10

  0 跟贴0
• 

  Google 搜索诞生 25 年来最大更新之一，用 AI 把搜索重做一遍。 通过视频直接提问，看看

  爱范儿 2024-05-15 14:09:36

  0 跟贴0
• 

  论文 Figure 不堪入目，句子啰嗦读不通……这几个在线科研工具可以免费用了

  生物学霸 2024-03-15 15:02:25

  0 跟贴0
• 

  奥运会大冷门！张本美和0-3惨败被横扫，不敌18岁德国新星

  全言作品 2024-08-09 03:10:31

  635 跟贴635
• 

  林钟勋没接到樊振东的球滑倒在地上 顺势坐下了

  时刻知讯 2024-08-07 17:18:56

  56 跟贴56
• 

  日本名将水谷隼说马龙是团体赛突破口：我经常赢他

  南门看客 2024-08-08 16:41:11

  950 跟贴950
• 

  男团1/4决赛樊振东入场 旁边外国大叔狂喊“樊振东”

  名场面bot 2024-08-08 06:52:31

  28 跟贴28
• 

  王楚钦被王皓夸打得好擦拍不理人 王皓战术性喝水

  南门看客 2024-08-09 16:43:07

  7 跟贴7
• 

  跆拳道女子57公斤级8强赛 头号种子骆宗诗2-1逆转巴西选手进4强

  直播吧 2024-08-08 21:19:07

  28 跟贴28
• 

  一个机器人变成人类的历程

  影子说影吖 2024-08-05 07:14:00

  128 跟贴128
• 

  我嘞个TF乒乓boys，真是又帅又强

  小影娱乐v 2024-08-08 10:49:58

  18 跟贴18
• 

  乒乓球中的神仙球，外国对手直接笑了，赢的霸气输的潇洒！

  静静爆笑社 2024-08-05 08:49:59

  225 跟贴225
• 

  苹果上的乒乓球世界冠军：王楚钦！

  三毛水果艺术 2024-08-06 20:43:49

  6 跟贴6
• 

  乒乓饭圈文化

  北有北一 2024-08-05 19:05:48

  3 跟贴3
• 

  奥运副主席呼吁平衡：中国太强，奖牌太过了，需给予他国更多机会

  小毅讲历史 2024-08-08 08:57:34

  3527 跟贴3527
• 

  盘点九位反派机器人排行，每个都是buff加满的存在，你觉得谁厉害

  皖跃影视 2024-08-05 11:56:41

  1 跟贴1
• 

  东北人带娃也这么搞笑，和机器人都能吵起来，重男轻女更是不存在

  芯儿娱乐 2024-08-05 16:36:23

  0 跟贴0
• 

  巴黎奥运会中国对韩国 裁判走神问王楚钦比分， 之前的一幕又上演了

  重庆观天下 2024-08-08 11:06:00

  15 跟贴15
• 

  撞王楚钦的瑞典女记者，被罚禁止进入巴黎奥运会比赛场地

  江西都市现场 2024-08-06 21:14:00

  119 跟贴119
• 

  奥运乒乓再爆冷门！日本2-0领先被逆转，落败后张本智和心态崩了

  小丸子解说 2024-08-08 12:17:05

  3 跟贴3
• 

  赵少康: 乒乓球拿金牌美国不说，田径游泳大陆拿金牌美国难受！

  台海风云 2024-08-09 00:02:03

  0 跟贴0
• 

  得罪谁也不能得罪中国人，法国在巴黎奥运会上净干好事，强的可怕

  网红叭叭酱 2024-08-06 18:24:26

  132 跟贴132
• 

  又来引战？跳水结束后，有网友称陈芋汐被压分了，若不压陈是冠军

  蜜桔娱乐 2024-08-07 10:11:48

  1640 跟贴1640

乌军攻入俄本土兵力暴增，俄罗斯召开紧急会议并向联合国发起控诉

史政先锋 2024-08-08 15:52:21

昨晚和丈夫沉浸在夫妻生活中，早上醒来发现忘记摘套，怎么办？

古今历史记 2024-08-09 10:13:39

突发！宁波舟山港一货轮集装箱爆炸！宁波港回应

新金融观察 2024-08-09 16:20:38

变乖了！莫雷加德见到国王点头哈腰，握手太用力，国王都皱眉了

好乒乓 2024-08-09 14:28:47

警方发出官方通报，青岛地铁老人打人结果新鲜出炉！知情人有内幕

吾爱纪实 2024-08-08 11:16:12

笑不活！张本智和的妹妹誓言女团夺金！孙颖莎：哭得不要太大声！

飞花文史 2024-08-09 10:33:09

孙颖莎问刘国梁:“我可以留长发吗？”刘国梁说:“不可以！”

百态人间 2024-08-08 17:20:43

石智勇丢金不怪伤病，教练大失误！领先10公斤都能输，对手都哭了

嘴炮体坛 2024-08-09 04:26:43

中国人顶着60℃高温帮非洲修路，当地人却坐在树下乘凉！纪录片

星光历史 2024-08-05 17:34:15

民调飙升！哈里斯身份变了，对华态度明确，中美关系有了新说法

傲气经说 2024-08-08 22:00:03

美军被“扫地出门”同一天，运20在非洲机场降落，走下一队解放军

空天力量 2024-08-09 13:18:45

“就是看不惯她成功”，女孩高调庆祝考研被人盯上，母亲后悔已晚

妍妍教育日记 2024-08-08 13:41:36

乌军占领库尔斯克400平方公里，俄陷入尴尬，本土近80年首被攻击

山河路口 2024-08-08 20:40:12

18岁男孩遇害后续！凶手是邻居兼亲戚，尸体被抛水中，姐姐已释怀

洛洛女巫 2024-08-09 10:04:30

巴黎奥运男团决赛时间+8月9日央视直播！国乒女队8月10日冲击金牌

开成运动会 2024-08-09 01:01:58

特斯拉Model Y前7月销量24.4万辆成国内销冠！比亚迪多款车进前十，Model 3单月交付3.2万辆，创43个月新高

和讯网 2024-08-09 10:13:40

奥运金牌榜又被变了？美国30分钟连拿3金 中国队被反超屈居第二

篮球快餐车 2024-08-09 06:06:21

郑中基宣布退圈，将由太太陪同前往美国戒酒

南方都市报 2024-08-06 22:00:05

大搞权钱交易，青岛国际机场集团有限公司原副总经理卢正明被开除党籍

鲁中晨报 2024-08-09 17:04:10

南开博士谈退休：退休后还能活27年，老人不想享清福，应终身劳动

趣史微视频 2024-08-08 15:23:07 2024-08-09 17:40:49 机器之心Pro 专业的人工智能媒体 9309文章数 141976关注度 往期回顾 全部

科技要闻

华为手机翻身仗：经销商称已基本回血

• 长城汽车掌舵人魏建军“炮轰”车圈销量榜，自家销量连续下滑

• 美媒：特斯拉股价大涨后又重挫，投资者深深怀疑自动驾驶技术

• 罗永浩很难再“交个朋友”

• 新势力"间接涨价" 车主：晚一天买多花8000

头条要闻

孟加拉国前总理之子：如果举行选举 母亲哈西娜将回国

• 特朗普：美国处于危险之中 中国和俄罗斯不再尊重我们

• 从陪练到奥运冠军 常园：为比赛最后几分钟我花了15年

• "电耗子"范集湘被逮捕 曾享受国务院特殊津贴

• 35岁清华毕业生再考清华:高考626分 未被任何学校录取

头条要闻

孟加拉国前总理之子：如果举行选举 母亲哈西娜将回国

• 特朗普：美国处于危险之中 中国和俄罗斯不再尊重我们

• 从陪练到奥运冠军 常园：为比赛最后几分钟我花了15年

• "电耗子"范集湘被逮捕 曾享受国务院特殊津贴

• 35岁清华毕业生再考清华:高考626分 未被任何学校录取

体育要闻

奥运唯一"五连金"神话 地表最强猛男谢幕

• 美国17分逆转塞尔维亚进决赛 库里36分詹姆斯三双

• 举重男子73公斤级:石智勇抓举第一挺举无成绩

• 第27金！谢思埸男子3米板成功卫冕 王宗源摘银

• 第26金！刘浩/季博文夺男子500米双人划艇冠军

娱乐要闻

诈骗、离婚、开庭，果真一地鸡毛了

• 景甜上线取关张继科！男方想洗白，评论区彻底沦陷

• “白富美”陈梦到底多有钱？一个包包5万元

• 孙俪一家四口现身巴黎吃火锅，邓超紧牵女儿小手，等等气质出众

• 全红婵哥哥直播带货，遭网友质疑蹭流量！大哥回应：尽能力帮忙！

财经要闻

起底泛茶老板80后郑朝根:曾和曹德旺同框

• 启动拍卖！中植系资产处置进入实质阶段

• 国家统计局：7月CPI同比上涨0.5% 环比上涨0.5%

• 证监会：未来资本市场改革需要更加重视投融资两端的平衡

• 嘉实基金董事长赵学军因个人问题配合有关部门调查

汽车要闻

预计8月正式上市 哪吒S猎装内饰官图发布

• 预售65万元起 TAHOE太浩将于8月20日正式上市

• 限时价17.98万元起 2025款领克08 EM-P上市

• 无框车门/轴距加长110mm 全新宝马2系申报图曝光

• 电动车买得起养不起？购车和用车成本一算吓一跳

态度原创

家居 手机 房产 公开课 军事航空

家居要闻

诗意栖居 高雅舒适生活

• 水色绿意 一个地方两种生活

• 浪漫主义 让家拥有优雅温度

• 浪漫主义 让家拥有优雅温度

手机要闻

Omdia 预估 2031 年手机 LTPO OLED 面板出货量 5.2 亿片

• 安卓板皇！OPPO Pad3 Pro首曝：骁龙8 Gen3加持 顶配16+1TB存储

• 国货厉害了！小米手机卖到日本前三，iPhone地位不保？

• Vision Pro原生应用突破2500个 苹果：全新里程碑

房产要闻

王炸来了！海口最强地块挂牌！起拍价12999元/㎡！自主定价销售！

• 2024年广州买房，最该做的是「一步到位」抢入主城！

• 重磅信号！海南首个基本放开限购的区域出现了！

• 楼市有变！海口湾冒出2.1w/㎡腊肉大平层；西海岸最低杀到1w+!

公开课

曾激光治近视的人，现在后悔吗？

• 白岩松谈人口老龄化：社会要降低老年人门槛

• 韩国50万年轻人躺平

• 曾激光治近视的人后悔了吗

• 李彦宏：百度离破产30天

军事要闻

以色列同意恢复加沙停火谈判

• 巴以冲突外溢 美称美军F-22战机已抵达相关地区

• F-16战机入列乌空军后 首次在赫尔松上空被俄发现

• 乌军千人部队攻入俄领土 梅德韦杰夫:俄军不该"仁慈"

© 1997-2024 网易公司版权所有 About NetEase | 公司简介 | 联系方法 | 招聘信息 | 客户服务 | 隐私政策 | 广告服务 | 不良信息举报 Complaint Center | 廉正举报 | 侵权投诉