击败DotA2顶级人类玩家,并不是AI的一次突破

量子位   2017-08-13 11:42

作者:Denny Britz,前谷歌大脑团队成员

问耕 编译整理

量子位 出品 | 公众号 QbitAI

击败DotA2顶级人类玩家,并不是AI的一次突破

工作人员手里举着一个U盘,装在里面的就是击败了人类DotA 2顶级玩家的人工智能程序

当我昨天看到OpenAI的人工智能,在一项奖金2400万美元的电子竞技赛事上,击败DotA2人类顶级高手时,整个人感觉超兴奋。

这是因为,一方面我是一个电子竞技的粉丝。尽管没玩过DotA 2,但我经常在Twitch上观看其他其他电竞赛事,高中时我还当过一阵半职业选手。

更重要是的,像DotA这类多人在线战术竞技游戏(MOBA),以及星际2这类实时策略游戏(RTS),通常被认为远超目前人工智能的驾驭能力。因为这两类游戏需要长期战略决策、多人合作,比国际象棋、围棋有着更复杂的状态和动作空间。

DeepMind已经在星际2上研究了一段时间,前不久刚刚发布了新的进展,但目前为止,相关研究还没有取得重大突破。大家普遍认为,距离人工智能在星际2上吊打人类顶级玩家,至少还有一两年的时间。

这就是OpenAI这个成果如此令人震惊的原因。这是怎么回事?最有有什么人工智能方面的突破是我没有注意到的么?于是我开始研究这个DotA 2人工智能到底干了什么,它是如何训练的,以及在什么样的游戏环境中运行。

我的结论是:这是一个令人印象深刻的成就。但不是一次AI上的突破。

通过这篇文章,我想提供一个关于此事的清醒解释。实际上,过度炒作人工智能的进步才是真正危险的事情。例如,下面这位在推特上的发言,才是真正的误导。

击败DotA2顶级人类玩家,并不是AI的一次突破

这是伊隆·马斯克的推特,这位硅谷钢铁侠不单创办了特斯拉,而且创办了OpenAI。上面这篇推特中,马斯克大意是说:OpenAI搞出了史上首个击败电子竞技顶级玩家的人工智能。这比搞国际象棋和围棋什么的复杂多了。

击败DotA2顶级人类玩家,并不是AI的一次突破

在第二条推特中,马斯克再次发表曾被AI届猛轰的观点:没人喜欢被管制,但对公众构成危险的一切(汽车、飞机、食品、药物等)都应该受到管制。AI也是一样。

(插播:当然,马斯克还发了一条,量子位就不翻译了,贴图如下)

击败DotA2顶级人类玩家,并不是AI的一次突破

首先要声明的是,我今天要谈及的炒作或者误导,并不是OpenAI研究人员的错误。OpenAI一直在研究方面都有诸多贡献。目前,OpenAI还没有公布他们解决方案的细节,所以外界很容易就会得出错误的结论。

现在开始切入正题。我们先来看看DotA 2的人工智能程序,到底解决了一个多困难的问题?尤其是与AlphaGo相比。

1v1不能与5v5相提并论

在正常的DotA 2游戏中,两个对抗的队伍各由五名玩家组成。游戏过程中需要高级策略、团队沟通和协调,一局比赛通常要45分钟。

而这次人工智能击败人类的比赛,采用了1v1的模式,这种模式有太多限制。例如双方基本上只能沿着单线前进,并尝试击杀对方,游戏过程几分钟就结束了。

在1v1模式中,击败对手主要靠机械技能和短期策略,并不涉及长期规划和协调,而后者才是对当前AI技术来说最具挑战性的部分。

事实上,在这次的人机DotA 2对抗中,可以采用的有效动作数量,少于围棋人机大战;有效的状态空间(目前局面情况),如果以智能的方式表示,应该比围棋要小。

AI可以获取更多信息

OpenAI的人工智能程序,极有可能是构建在DotA 2原有的机器人接口之上,可以获取更多人类玩家看不到的信息。即使OpenAI的研究人员限制了这些信息的获取,人工智能仍然能够得到比人类更精准的信息。

例如技能的施放,人类玩家必须紧盯屏幕,并且估算与对手之间的距离。而AI知道确切的距离,并且能立即决定是否施放技能。获得精准的数字信息是一个很大的优势。其实对战过程中你就能看到,AI有几次攻击都是在最大距离上展开。

DotA 2人机大战全程回放,请访问量子位公众号(QbitAI)查看。

反应时间

AI可以立即作出反应,人类不行。再加上刚才说的信息优势,AI的优势进一步扩大了。比方,一旦对手逃离攻击范围,AI可以立刻取消攻击命令。

使用单一英雄

DotA 2中有上百种不同的英雄角色,各具不同的能力和优势。而AI掌握的只是其中一个英雄:Shadow Fiend(影魔)。影魔通常会立刻展开攻击,而不是在一段时间内学习掌握更复杂的攻击技能,这更加有利于发挥AI在信息和反应方面的优势。

所以,鉴于1v1主要比拼机械技能,AI击败人类玩家并不奇怪。鉴于游戏环境被严格限制,造成一些列战术和策略也被限制,而且对战中几乎没有必要进行长期规划或协调。

击败DotA2顶级人类玩家,并不是AI的一次突破

DotA 2中的影魔

再次重申我的结论:这次AI击败DotA玩家,比在围棋中击败人类冠军要容易得多。人类没有在AI领域突然取得突破。

这次在DotA对抗中之所以AI获胜,是因为研究人员聪明的设置了问题,使得AI可以绕过目前人工智能的技术限制。

据说这个OpenAI训练这个AI打DotA花了2周。与之相比,AlphaGo在Google的GPU集群上进行了数月的分布式大规模训练。两个程序之间的计算要求有着数量级的区别。

好吧,最后夸夸这个会玩DotA的AI,到底有何精彩之处?

完全通过自学训练

AI不需要任何训练数据,也不会从人类的比赛中学习。整个学习过程随机开始,并且通过和自己对抗进行学习。虽然这不是什么新技术,但令人惊讶的是,AI学会了人类玩家已经在使用的技术。这很酷。

AI可能还有其他技术,甚至人类都不知道。这与我们在AlphaGo中看到的类似,围棋选手已经开始学习AI的下棋方式。

AI+电竞的重要一步

在具有挑战性的环境中(例如DotA 2和星际2)来测试AI技术是非常重要的。AI可以为游戏提供更多的价值,游戏也会助推AI更快发展。

不完美信息

在DotA对决中,人类玩家智能看到地图的一小部分,视线受到妨碍。AI可能也一样,虽然还不清楚OpenAI如何处理这个问题的细节。

这意味着与围棋、国际象棋、Atari游戏机等环境不同,AI在DotA中处于一个部分可观察的环境,而无法获知关于游戏当前状态的完整信息。这类问题通常难以解决,话虽如此,但目前还不清楚1v1的DotA 2比赛中,视野的重要性到底几何。

不管怎样,非常期待看到OpenAI关于这次比赛的技术报告。

—— ——

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI

վ'ᴗ' ի 追踪AI技术和产品新动态

内容推荐
更多阅读

· 新版白蛇传开拍,孙骁骁的白蛇一点不温婉,还没青蛇好看

· 日本现在最火的牛郎:火到大家都要求他们组个组合出道的地步

· 又一个小童星诞生了,石悦安鑫玲珑剔透,浑身透着机灵

· 路人偶遇明星,看看跟荧屏差距大吗

· 高圆圆自爆164.5,那同框的baby有168?有几个是真实

· 李小鹏带儿子散心,抱娃动作好吓人,网友:好害怕小孩儿会掉下来

· 胡可用鱼网兜住小鱼儿称,安吉拍完照片吐舌翻白眼,妈妈眼睛笑弯

· baby一直被传整容传闻,这次生完孩子的她现在怎么变成这样了

· 最强大脑4脑力魔法师苏泽河个人资料微博照片获奖经历

· 中国移动推天王卡怼联通,10G流量+1210分钟通话

· 拜仁VS皇马解签:安切洛蒂面对旧主 与齐达内师徒重逢

· 官方公告:金花清感颗粒等重要治疗领域新药获批

· 315曝光日本核辐射区食品全名单

· 《三国志13威力加强版》最恶心AI武将大盘点

· 「经典战例」兖州攻坚战:为济南战役奏响序曲!

· 品三国人物之孙策:举贤荐能不输诸葛亮,这里可以看出

· 终于等到你!郎平回国了,北京出席交车仪式

· 买房时补充协议怎么写?这7个条款一定要有!

· 明星撞脸动物太搞笑,看到最后一张我喷饭!

· 曾经是快女冠军,新专辑造型被讽雷人,如今整容失败前途堪忧

· 印度又一神作《摔跤吧!爸爸》,引观众全体起立致敬!

· 他58岁生日,TVB多位小花扮“豹妹”为他庆生,享尽美女缘!

· 这周要带着少女心在电影院炸成烟花!丨周末看电影

· 大咖来了|4月29日,谭校长要率香港明星足球队到西昌踢馆啦!

· 比王思聪还富的超级富二代秦奋,情史也绝不逊色于王思聪!

· 《因为遇见你》稳坐收视第一宝座 李眸人气看涨获邀不断

· 宣扬正能量《超凡战队》中文预告公开

· 薛之谦发布新歌 众明星力捧

· 贾乃亮现身酒店网友瞬间疯狂,鞋都踩掉了,吓得赶紧坐豪车走掉

· 2017年电视剧品质盛典获奖明星

· 邓超陈赫互怼不小心暴露了录制环境超级差,超哥气急了放话:绝交

· 《孤芳不自赏》宣传方严正声明:从不认识更不欠钱!

· 「圈友八卦周知道」第十四期八卦W姓男星和S姓男星在剧本做笔记、马可拍摄思美人八卦、T姓女星超女之后口碑不好

· 克罗斯:想要夺得最后冠军,必须击败所有对手

· 趣史:林语堂与南洋大学那些你不知道的梗!

· 「史海泛舟」苻坚为何没能成为下一个曹操

· 京杭大运河——毁了隋炀帝的“大业”称号

· 幼儿道破天机命悬一线,慈母勇闯黄泉,阴阳老道招魂之路惊心动魄

· 动动心,做精致的女人!

· 艺术家 Carmelo blandino 花卉绘画作品

· GIF-这球算了?疆辽最后4秒计时器停滞 裁判判继伟绝杀有效

· 跑男1-5季海报有讲究,鹿晗、迪丽热巴、包贝尔都被“欺负”

· 榜妹热线|刘诗诗近况、李沁资源、郑业成拍戏、张子枫发展

· 娱乐圈咖位大战,处处战场勾心斗角的顶级后宫

· 他是《红楼梦》里的板儿,一生只出演一角色,年仅29岁英年早逝

· 米兰达儿子是绅士大男人,奥兰多儿子是调皮小王子!这就是差距

· 全球华人钢琴家音乐季元杰钢琴独奏音乐会

· 欧阳娜娜搭档陈凯歌之子,看看颜值满意吗

· 邓超陈赫微博互怼!海尔君也来瞎掺和来了

· 《甄嬛传》熹妃听闻皇上提及此事,一定会有种想吐的感觉

· 14岁北京学舞蹈,入选美国时代周刊,全球30位最具网络影响人

· 一些奇葩的电影,你看过吗?

· 张艺谋和冯小刚选的女童星 一个演技出众一个被唾骂!

· 董子健访谈尺度大到惊人,车速太快,没想到你是这样的董子健

· 王中磊儿子学钢琴手型不对被打,王中磊给出的解释让人笑喷了!

· 胡军大秀,引起整个娱乐圈和媒体的关注!

· 王宝强好兄弟中最低调的一位,娶二婚女却爱妻如命

· 现在出手早不早?热门中级降价排行榜

· 临清人吕恒安曾任台湾总兵

· 元朝鲜于枢行书《韩愈送李愿归盘谷序卷》

· 去山中寻药,猿猴下跪磕头,救了母猴后,猿猴送他千年人参

· 故事:不喝孟婆汤就投胎转世,再生人到底有多痛苦!

· 证监会对5宗案件作出行政处罚

· 2017“快男”西安分唱区启动 黄子韬当代言人

· 毁童年!“恐龙战队”红衣战士演员用剑捅死室友

· 妈妈是著名女主持,16岁当苹果广告片女主,干爹为她出道铺路

· “泰国版”还珠格格片段,是男是女傻傻分不清楚!

· 明星都开啥豪车,黄渤爱日系车,赵薇最低调

· 网络热剧《热血长安》接近收官,张辛苑网络引热议

· 震惊!脱光裸睡、吃饱才能睡着,男明星睡觉癖真不少!

· 非常喜欢这部电影,是因为它写出了文艺青年的心声

· 杨洋恋情归属自己女朋友,粉丝皆大欢喜!

· 看到明星们扮演民国角色,赵丽颖最美,刘亦菲真够惊艳!

· 甄嬛传甄嬛因纯元故衣失宠,安陵容却发现了不一样的秘密

· 出道45年,20年拒吃米饭,二婚嫁美籍华侨丑男为事业拒绝生育

· 迪士尼公主为啥都穿蓝色:色彩专家说出真相

· 真人秀广告植入效果如何去评价

· 佐佐木希与汤姆希德斯顿同框 俊男美女组合粉丝喊羡慕

· 《A计划》里的“罗三炮”,开武馆被发掘,65岁身材依旧很健硕

· 张庭一家机场照,林瑞阳抱儿子像爷孙?女儿萌萌哒!

· 《吐槽大会》是场秀?李小璐台上互斯,台下组局吃饭

· 被骂的越惨,说明这个人越红,热巴滥接广告被批太掉价

· 他不仅是“星二代”,还是MBA硕士、3D动画设计师

· 从英气到匪气,两段婚姻塑造熟男魅力,聂远39岁生日快乐

· 艺术生你要当心,优酷已经对你师妹下手了!

· 资深钟表媒体人徐不工在线课堂:珐琅 IIII

· 小小军团合战三国英雄技能和新兵种特性全数值

· 民间故事:都说养儿防老,可他养了三个好儿女,却不如一只狼

· CBA季后赛巅峰一战却被计时器毁掉,如此联赛何谈职业?

· 女员工拓展时摔伤,公司赔偿近36万元

· 胡歌成综艺节目香饽饽,只要肯来先给一个亿

· 灵异|回顾邵氏影片,818猛鬼厕所奇闻录

· 《胜利的游戏》,真实才是一档节目最完美的脚本

· 车晓跟山西首富离婚爆出三个亿分手费 这钱在银行一年也有五百万

· 《斗破苍穹》十大美女排行榜 与你心中的一样吗?各位书友!

· 维嘉暴瘦竟然是因为惨遭经纪人劈腿骗房?赵丽颖前经纪人反目成仇

· 谢楠深夜放毒 吃的太销魂!吴京一百元八只龙虾!

· 豆瓣9.3,两个奥斯卡影后演出了一部好莱坞史诗级撕逼大戏!

· 《致命男友》定档3.25 推翻你的思维

· 古巨基致敬张国荣哭成泪人 贴钱义演为「哥迷会」筹款

· 道士也是普通人

· 志明与春娇又来啦,不懂电影分级,都不知道自己看过多少三级片

· CBA丑陋一夜,投篮才开始计时,辽宁胜之不武,裁判到底为了啥

· 中国游客投诉大马移民局官员 称被强行扣留坑钱

· 游之良品:美食番《东京喰种:re invoke》再上餐桌 一口下去竟高潮了……

· 蒙恬若不死,“战神”和“楚霸王”谁能更胜一筹

· 细看故宫:内廷后三宫,交泰殿划定乾坤(图)

· 王者荣耀,历史上你不知道的兰陵王

· 孩子的玩具贵别瞎买,这些玩具才能帮孩子益智和娱乐,买对了吗?

· 不孝子失手打死母亲,发丧出殡引来巨蟒围棺,凶手在劫难逃

· 这家深山里的铁匠铺,只做世界名刀,每一把都价值不菲!

· 请抓住周六好天气的尾巴

· 嫁入豪门成京城四少后妈,四十岁再复出心酸原因曝光

· 「WINNER」「新闻」170317 热搜体质温拿!回归关键词登热门

· 重温法证先锋3,真为胡定欣EVA不值!

· 常远与曹云金关系“密切”,与郭德纲关系如何引网友猜测

· 星野源主演日剧《PLAGE》失去一切的罪犯合租屋中重生

· 当女星穿上透视装,范冰冰惨不忍睹!baby成熟稳重!

· 电视剧《热血尖兵》热播 演员安洋受关注

· 赵丽颖微博晒健身照香汗淋漓 网友惊呼:我看到了腹肌!

· 谁说骨架大就不能性感了?

· 古装剧还能这样拍?赵又廷景甜关晓彤为你解锁拍摄新姿势

· 科勒卡戴珊郁闷为汤普森怀不上孩子 大姐二姐让她羡慕不已

· 看看明星的减肥餐,瘦子都这么拼,你还有什么理由不努力

· 超人加入《不可能的任务6》!导演“试镜方法”网笑翻

· 男星白发有的让你惊艳,而有些真得让你一言难尽

· 杨幂大伯突然走红,大幂幂这样评价他

· 中联重科4.0产品全国巡展首站长沙启动

· 全球新药的“中国时差”要消失了!新药定价是下一个关注重点

· 2016 药品评审报告出炉,11 种新药准备面市

· 中国版三位一体护卫舰与美国濒海战斗舰誓比高

· 第一德胜控股(00918)拟改名“国能集团国际资产控股”

· 一发作就到小诊所注射激素 痛风男9年乱止痛股骨头坏死

· 故事:两百块钱买来一双鞋底,厄运转变从此事事顺心走上人生坦途

· 房费还没付清 中介公司人去楼空

· 陈赫发了条微博,说出很多人心声

· 《古剑奇谭2》海报揭幕 姜雯一袭碧翠羽衣仙气足

· iPhone7亮黑爆出“天花门”,打开保护套瞬间恶心吐了

· 《爸爸去哪儿》童星李亦航发了一条微博,结果却引来网友不满

· 日本超人气女团惊传集体染上诺罗病毒!目前紧急送医仍在观察中

· 佟大为弟弟上非诚勿扰?女嘉宾最后一句话激怒网友!

· 《三生三世》揭露了一部剧真正火起来的方式!

· 韩剧中的李氏朝鲜到底和现实中的李氏朝鲜有什么样子的不同?

· 王祖蓝夫妇携家人聚餐 李亚男素颜尽现身尽显好身材

· 团宠终变团霸,为SJ、防弹、EXO等团的哥哥们默默祈祷

· 薛之谦新歌岳云鹏范冰冰众星力挺,十分钟问鼎酷狗飙升榜

· 错失《凤求凰》,杨蓉新戏接不停,《警犬来了》演绎“俏警花”

· 《射雕英雄传》:假冒的裘千仞是如何不被发现的

· 迪丽热巴今年的发展趋势很猛,她以后会红过杨幂吗?

· 没有锤子T1出来捣乱,iPhone7P终于又拿到iF金奖了

· 2月国内汽车销量榜公布 轿车第1名终于不是朗逸了……

· 我只玩颜值高的游戏

· 毛泽东盛情邀请仇鳘来京

· 禹州大鸿寨龙泉寺佛教文化及历史演变

· 丰臣秀吉攻打朝鲜的真实原因

· 威斯布鲁克再创伟大纪录,历史第二人

· 网爆真男3拟选嘉宾图片:热巴杨洋均在列,杨幂黄子韬还有可能上

· 王思聪力挺萧鼎与欢瑞开撕:只想疯狂捞金的农民

· 19岁日本女团成员性感杂志大片曝光

· TF家族新人出道录天天向上!两枚小鲜肉上线颜值不输明星!

· 古代忍者道具「水蜘蛛」可能只是游泳圈 & 东京地铁车厢内将覆盖监控

· 逆天大嘴1v5四杀!一人干翻EDG的镜头你看了么?

· 人物|南通名人之徐益修

· 三国史中除了貂蝉 谁还被后人津津乐道?丨百科解密147期

· 《伪装者》《琅琊榜2》都有他,出道就搭胡歌王凯这孩子来头不小

· 《你好,旧时光》女主定角李兰迪,网友直呼:男主要吴磊

· 高能少年团延期播出原因 本周王牌对王牌将霸屏两日

· 他的离婚是个秘密,娱乐圈的好父亲,他能东山再起吗?

· 郑爽清空微博是怎么回事?郑爽清空微博是为什么?

· 全白西装look,诗诗帅气、王鸥柔媚、亦菲优雅、娜扎像张翰

· 直击安以轩新娘照,陈乔恩又当伴娘

· 天津出生,17岁闯香港,打拼娱乐圈终成“大佬”一代传奇

· 论宫斗水平,在座各位女星只配活到第二集……

· 《乡村爱情9》电视剧中唯一一个被骂惨的女人,人不算太丑但心丑

· 连道具都不放过的吃货明星们,有你家爱豆吗?

· 法兴加入商品多头阵营:除了黄金,其他都可以搓堆儿买!

· 月球的各种发现,玛雅人预言等,都证实的是月球有外星人,比地球古老?

· 面条这样做才更好吃,简单美味每天一种不重复

· 中芯国际投入7nm 分析师称良率才是挑战

· 差距!张玉宁只能混迹预备队,19岁丹麦新星已是豪门的射手王!

· 刘硕扬:用一支笔为国防和军队做贡献的军中女博士

· 《今日影评》导演胡玫:明星耍大牌是因为制片人不专业

· 赵丽颖最新电视剧公布了上映时间,网友:如果在湖南卫视播将拒看

· 香港亚洲电影投资会,陆川、宁浩等导演都曾入选过它的电影计划!

· 郑恺练毛笔字被批浪费纸墨后街头取经大爷 但写的字又闹了尴尬

· 《A LIFE~深爱的人~》收视率怎么样 好不好看

· 她是陆毅初恋,苦恋四年分手,如今婚姻一直是个迷

· 奶茶妹穿红毛衣素颜显清纯,身家数十亿阔太,离场获工作人员指引

· 柳岩束胸白袍化身女神性感不减 片场不惧冷风酥胸迷人

· 张译谈和王宝强一起住的事,看看张译是如何评价王宝强的

· “华妃娘娘”深圳拍戏引围观,腿粗脸大疑发胖

· 独宠布鲁克林的维多利亚看到他为爸爸狂欢,眼神充满了嫉妒和不满

· 除了黄磊,娱乐圈里还有一个大厨,他做的酱两天时间卖出3万瓶!

· 民国奇才子,人称“怪物”的谐趣斗士

· 经纪人:亚亚-图雷今夏可能加盟任何球队

· 石家庄住房限购政策来啦!这些变化与你息息相关

· 林更新真是传说中的北鼻克星!这节目应该叫放开我林二狗!

· 「NCT」「分享」170317 NCT 127登上韩国杂志《Nylon》四月刊封面!

· 《芈月传》作者蒋胜男搬来杭州 她的工作室在馒头山揭牌

· 潘长江身材短小却喜欢开大车 曾被警察拦下被认为是无人驾驶

精彩图片