击败DotA2顶级人类玩家,并不是AI的一次突破

量子位   2017-08-13 11:42

作者:Denny Britz,前谷歌大脑团队成员

问耕 编译整理

量子位 出品 | 公众号 QbitAI

击败DotA2顶级人类玩家,并不是AI的一次突破

工作人员手里举着一个U盘,装在里面的就是击败了人类DotA 2顶级玩家的人工智能程序

当我昨天看到OpenAI的人工智能,在一项奖金2400万美元的电子竞技赛事上,击败DotA2人类顶级高手时,整个人感觉超兴奋。

这是因为,一方面我是一个电子竞技的粉丝。尽管没玩过DotA 2,但我经常在Twitch上观看其他其他电竞赛事,高中时我还当过一阵半职业选手。

更重要是的,像DotA这类多人在线战术竞技游戏(MOBA),以及星际2这类实时策略游戏(RTS),通常被认为远超目前人工智能的驾驭能力。因为这两类游戏需要长期战略决策、多人合作,比国际象棋、围棋有着更复杂的状态和动作空间。

DeepMind已经在星际2上研究了一段时间,前不久刚刚发布了新的进展,但目前为止,相关研究还没有取得重大突破。大家普遍认为,距离人工智能在星际2上吊打人类顶级玩家,至少还有一两年的时间。

这就是OpenAI这个成果如此令人震惊的原因。这是怎么回事?最有有什么人工智能方面的突破是我没有注意到的么?于是我开始研究这个DotA 2人工智能到底干了什么,它是如何训练的,以及在什么样的游戏环境中运行。

我的结论是:这是一个令人印象深刻的成就。但不是一次AI上的突破。

通过这篇文章,我想提供一个关于此事的清醒解释。实际上,过度炒作人工智能的进步才是真正危险的事情。例如,下面这位在推特上的发言,才是真正的误导。

击败DotA2顶级人类玩家,并不是AI的一次突破

这是伊隆·马斯克的推特,这位硅谷钢铁侠不单创办了特斯拉,而且创办了OpenAI。上面这篇推特中,马斯克大意是说:OpenAI搞出了史上首个击败电子竞技顶级玩家的人工智能。这比搞国际象棋和围棋什么的复杂多了。

击败DotA2顶级人类玩家,并不是AI的一次突破

在第二条推特中,马斯克再次发表曾被AI届猛轰的观点:没人喜欢被管制,但对公众构成危险的一切(汽车、飞机、食品、药物等)都应该受到管制。AI也是一样。

(插播:当然,马斯克还发了一条,量子位就不翻译了,贴图如下)

击败DotA2顶级人类玩家,并不是AI的一次突破

首先要声明的是,我今天要谈及的炒作或者误导,并不是OpenAI研究人员的错误。OpenAI一直在研究方面都有诸多贡献。目前,OpenAI还没有公布他们解决方案的细节,所以外界很容易就会得出错误的结论。

现在开始切入正题。我们先来看看DotA 2的人工智能程序,到底解决了一个多困难的问题?尤其是与AlphaGo相比。

1v1不能与5v5相提并论

在正常的DotA 2游戏中,两个对抗的队伍各由五名玩家组成。游戏过程中需要高级策略、团队沟通和协调,一局比赛通常要45分钟。

而这次人工智能击败人类的比赛,采用了1v1的模式,这种模式有太多限制。例如双方基本上只能沿着单线前进,并尝试击杀对方,游戏过程几分钟就结束了。

在1v1模式中,击败对手主要靠机械技能和短期策略,并不涉及长期规划和协调,而后者才是对当前AI技术来说最具挑战性的部分。

事实上,在这次的人机DotA 2对抗中,可以采用的有效动作数量,少于围棋人机大战;有效的状态空间(目前局面情况),如果以智能的方式表示,应该比围棋要小。

AI可以获取更多信息

OpenAI的人工智能程序,极有可能是构建在DotA 2原有的机器人接口之上,可以获取更多人类玩家看不到的信息。即使OpenAI的研究人员限制了这些信息的获取,人工智能仍然能够得到比人类更精准的信息。

例如技能的施放,人类玩家必须紧盯屏幕,并且估算与对手之间的距离。而AI知道确切的距离,并且能立即决定是否施放技能。获得精准的数字信息是一个很大的优势。其实对战过程中你就能看到,AI有几次攻击都是在最大距离上展开。

DotA 2人机大战全程回放,请访问量子位公众号(QbitAI)查看。

反应时间

AI可以立即作出反应,人类不行。再加上刚才说的信息优势,AI的优势进一步扩大了。比方,一旦对手逃离攻击范围,AI可以立刻取消攻击命令。

使用单一英雄

DotA 2中有上百种不同的英雄角色,各具不同的能力和优势。而AI掌握的只是其中一个英雄:Shadow Fiend(影魔)。影魔通常会立刻展开攻击,而不是在一段时间内学习掌握更复杂的攻击技能,这更加有利于发挥AI在信息和反应方面的优势。

所以,鉴于1v1主要比拼机械技能,AI击败人类玩家并不奇怪。鉴于游戏环境被严格限制,造成一些列战术和策略也被限制,而且对战中几乎没有必要进行长期规划或协调。

击败DotA2顶级人类玩家,并不是AI的一次突破

DotA 2中的影魔

再次重申我的结论:这次AI击败DotA玩家,比在围棋中击败人类冠军要容易得多。人类没有在AI领域突然取得突破。

这次在DotA对抗中之所以AI获胜,是因为研究人员聪明的设置了问题,使得AI可以绕过目前人工智能的技术限制。

据说这个OpenAI训练这个AI打DotA花了2周。与之相比,AlphaGo在Google的GPU集群上进行了数月的分布式大规模训练。两个程序之间的计算要求有着数量级的区别。

好吧,最后夸夸这个会玩DotA的AI,到底有何精彩之处?

完全通过自学训练

AI不需要任何训练数据,也不会从人类的比赛中学习。整个学习过程随机开始,并且通过和自己对抗进行学习。虽然这不是什么新技术,但令人惊讶的是,AI学会了人类玩家已经在使用的技术。这很酷。

AI可能还有其他技术,甚至人类都不知道。这与我们在AlphaGo中看到的类似,围棋选手已经开始学习AI的下棋方式。

AI+电竞的重要一步

在具有挑战性的环境中(例如DotA 2和星际2)来测试AI技术是非常重要的。AI可以为游戏提供更多的价值,游戏也会助推AI更快发展。

不完美信息

在DotA对决中,人类玩家智能看到地图的一小部分,视线受到妨碍。AI可能也一样,虽然还不清楚OpenAI如何处理这个问题的细节。

这意味着与围棋、国际象棋、Atari游戏机等环境不同,AI在DotA中处于一个部分可观察的环境,而无法获知关于游戏当前状态的完整信息。这类问题通常难以解决,话虽如此,但目前还不清楚1v1的DotA 2比赛中,视野的重要性到底几何。

不管怎样,非常期待看到OpenAI关于这次比赛的技术报告。

—— ——

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI

վ'ᴗ' ի 追踪AI技术和产品新动态

内容推荐
更多阅读

· 揭秘:为什么国际空间站没有中国?

· DNF搬砖的主流装备搭配 谈谈传说装备具体选择

· 经典游戏真的可以复制?是谁在打着怀旧的旗号,出卖玩家的感情!

· LOL:SKT神话破灭,LZ夺得夏季赛冠军

· 胶东半岛第一高峰,有“海上仙山之祖”之称

· 杀牙齿神经到底是什么?

· 中年偏胖之男子,尿酸高的要看下!

· 耍大牌?看看张翰在《战狼2》的片酬,难怪小鲜肉全部拒绝拍摄了

· 华为OPPO都退下吧,小米MIX2即将发布,或卖到4999元

· 他们气势如虹 盘点火影十大最强家族

· 十二年来最强飓风登陆美国得州,州长称几乎肯定将有人伤亡

· 手机和平板们,真的能够代替电脑吗?

· 【预见机器人】亦庄“机”密 周末的机器人大会是这样的!

· 与其一个人吃狗粮,不如一群人看晚会!邀你七夕锁定“苏宁之夏”

· 炫富只服梅威瑟,钞票压床 美女如云,半小时收入=詹皇8个

· 国乒惨败遭郝海东炮轰:乒乓球是业余比赛,国际化程度不高才夺冠

· 马德兴:勿以国青胜日本喜 勿以国青负茨城悲

· 山东金岭矿业股份有限公司2017年半年度报告摘要

· 《英才耀龙江·龙江新动力》之“老少‘新’人类”-工学博士万杰:大数据与大梦想

· 中国接二连三曝出新战机,这国造不出,花百亿美元满世界求购

· 鱼女奇缘(民间故事)

· 妇产检到一半连鞋都不要跑出来,丈夫了解后差点动手打人

· 身高不足妻子一半,靠双手握脚走路生育一儿一女,村里谁见谁夸他

· 成为泰国第一打星,他不止靠武力,更靠武德

· 蕾哈娜蕾哈娜,星际特工里她才是最大亮点

· 格拉纳达发推文宣布:力帆外援拉莫斯留队

· 科学家发现农业的诞生使人类头骨发生变化

· 片片飞花花不尽,寸寸相思思无边

· 悟出来的时候

· 一叶知秋诗天下,万丈红尘一杯酒,惹人感慨万千的愁绪

· 这5座火车站旅客印象深刻,有人在这吃过亏上过当

· 全运会明日开幕 金陵体育、易华录产品将为赛事服务

· 克什米尔游击队袭击警营,印媒称5名安全人员被打死

· 为什么国外单机游戏比中国的多?而中国似乎却没有“游戏大作”?

· 别再东极、花鸟岛,舟山这座仅次普陀的“海上佛国”人少玩法多

· 一头大象洗了个澡,竟成了世界之谜?

· 宝马M4敞篷限量版实拍,108万起售

· 换新LIDAR设备 苹果自动驾驶车辆又现身

· 华新水泥半年报增近90倍

· 高中没毕业,他靠卖域名身价上百亿,还做出风靡无数少女的神器

· 中国红十字援外医疗队赴阿富汗开展“一带一路”大病患儿人道救助行动

· 新津,要在全国出名了!

· 宇宙中最土豪的星球(钻石星球)

· 十句话,看清别人,明白自己

· 最好的活法,就两句话(句句有理)

· 适合发朋友圈说说的语录句子

· “铲屎官”鹿晗胡歌日常“吸喵成瘾”,出了名的“猫奴”还有舒淇

· 《赛车总动员3》:心有猛虎,细嗅保温杯

· 国足为中国争了口气!日本人输不起吹黑哨,被2-1击败狠狠打脸

· 冲超在望!一方变阵因祸得福 防守反击“粗中有细”

· 智+谈|CRS税感时代下,让资产不再裸奔

· 名联掌故:“两间东倒西歪屋”对个下联

· 美国突现第二个黄石超级火山群,二者相毗邻,人类物种将因此灭绝

· 七夕来临!与另一半,相濡以沫

· 后来我们都哭了,语句精选!

· 考驾照引发的“情债”

· 俄罗斯或将格洛纳斯导航并入中国北斗系统?印度半数装备一夜作废

· 曼城超长补时绝杀引争议,瓜迪奥拉反超曼联登顶 冠军相已露?

· 下周金市展望:非农来袭 阻力“长城”或攻而不破?

· 王克强在市人大常委会党组中心组和机关党支部“大研讨大行动”活动专题学习会上强调:提高国防意识 强化南海维权

· 巴西超模出场费排名世界第三,网友:值这个价吗?

· 东北一宝贝,日本人白找14年,30年后被发现,负责人剖腹谢罪

· 下班在烧烤摊点了7个菜,只花了200多元钱,你觉得值吗?

· 又是一年开学季,你送孩子去寄宿了吗

· 昨夜星光灿烂,回顾美国音乐一百年。可惜许

· 蓝皮书:国防大数据将成为抢占未来战争制高点的基石

· 这几样华而不实的武器:过于科幻,中看不中用

· 每日壹图:美国|对峙

· 九分裤+平底鞋,才是入秋最万能的搭配,没有之一!

· 不和霍思燕同框,你永远不知道范冰冰有多美!

· 德国的强大,必须感谢此人,曾准确预测30年后中日两国国运

· 宝宝出生后大哭不止,检查发现嘴中长出了东西,妈妈吓得够呛

· 故事:老太太返老还童,道士说是邪气上身,但却没有人恨上身的鬼

· 人生,应该主宰自己的心情

· 励志成功语录,句句入骨!

· 经整容后,明显变得好看许多的6位男星,最后一位不承认整过容!

· 每天花9元就能使用iPhone7 共享手机询问者多尝鲜者少

· 黑人拳王加入中国籍:娶了令人羡慕的白富美,生的孩子却不黑?

· “特战勇士”“魔鬼周”训练记

· 张艺兴代言了Converse!还出了升级版的One star

· UZI,condi,侯爷和Korol一起打麻将,你觉得谁赢?

· 孩子出生后丈夫怀疑非亲生要做鉴定,迫于无奈妈妈说出真相

· 逻辑推理小故事(47):聪明反被聪明误

· 假如 我是一只鱼

· 十二星座之天蝎座

· 张艺兴的我一般不搞笑系列之我霸王龙的点你们get不到的

· 《战狼2》水下摄影团队操刀《河神》水下戏,全部实景拍摄

· 广汽传祺GS7正式上市 售价14.98-20.98万元

· 《世界汽车拉力锦标赛7》最新预告片展示2017福特嘉年华漂移英姿

· 古董车拍卖市场洗牌:天价车淡出 新藏家入场

· 曼城绝杀夜1人却十分落寞!主力不保离队流言恐再起!

· 真正让银行颤抖的并不是马云,而是腾讯,微信月活9.63亿

· 日本投降本是全亚洲人民欢庆的时刻,此国却到处是痛哭和自杀

· 先有鸡还是先有蛋?到了锡林浩特看了贝子庙就知道答案!

· 内蒙古十座入围《西部大开发“十三五”规划》特色小城镇究竟多美

· 解放战争中李达因何事向刘伯承道歉

· 鱼汤鲜美无比,腥味成了绊脚石,6个去腥诀窍,收藏起来享受鱼汤

· 这4类人吃西瓜,会越吃越伤身!尤其是第3类人,中国至少有1亿

· 弟弟淹死在水库,母亲却指着弟弟尸体说死的是我

· 12句经典中年人生感悟「句句精辟」

· 静听花开的声音,感受自然的芳香,生命象鲜花般怒放!

· 资本讲故事 昔日“股王”全通教育陨落 在线教育迎新一轮机会还是泡沫?

· 当老年人遇上新科技,各种尴尬其实让我们心酸

· 中甲最新积分榜:大连客胜深圳继续领跑,石家庄战平武汉排第三

· 郎平现场目睹天津王朝终结 津门全运三连冠梦碎恐无国手战东京

· 首次染红!斯特林第一次在英超被罚下

· 安信证券:本轮周期行情没有结束

· 战狼映前张翰被骂,吴京为什么不澄清曝光,张翰如今无比感谢吴京

· 吸金大战就要开打!嘴仗打了那么久,梅威瑟与嘴炮谁能笑傲江湖?

· 镜头下:越南军民给美军设置的陷阱,每一种都让人不寒而栗

· 护士服大揭秘

· 我四岁的儿子玩塞尔达的时候喊的话,让我泪流满面……

· 贵州这几个城市上榜最具魅力城市,哪一个是你喜欢的吗?

· 最美婺源,村里小池塘的鱼,种类繁多而美味

· 隐藏在密林的山洞走出一群人,孕育8个王朝,驰骋中原近300年

· 金牌牛掌制作方法

· 送给“来自星星的孩子”的礼物——地板时光!

· 鲁迅先生为何瞧不起郭沫若?只因郭沫若太无耻!

· 一群明星跑去看周杰伦演唱会,连发微博表白周杰伦的他竟然没去

· 现役各位置零腹肌球员,每一个都是巨星!火箭能否集齐三人?

· 资金端做减法 私募求变加码资产管理

· 专访:“我们坚定支持‘一带一路’倡议”

· 1000多架飞机摔着玩儿,世界空军也只有它了

· 梦碎LCK!SKT战队季后赛总决赛爆冷1:3负于龙珠战队

· 《喷射战士2》成为日本首个破百万的Switch游戏

· 象山等你来嗨!肥美海鲜还有30秒到达战场!

· 以1: 0.06打破纪录创下了iTunes历史下载最大差幅

· 5个毛骨悚然的真实灵异经历,清凉一夏!

· 照亮人生的24条金句,适用每一个人

· 为什么网吧电脑不卡顿流畅,教你让自家电脑也流畅不卡顿!

· 毛大庆力证共享办公非二房东 否认说潘石屹“走偏”

· 詹姆斯身穿巴萨球衣:阴影不能掩盖我的光芒

· 结荚率不及预期,美豆单产有下调可能

· 中小微企业比拼创新活动与投资潜力 “长沙银行杯”评选活动启动

· 云南十九怪!一年12月,月月有奇景!

· 鱼头(民间故事)

· 故事:她是村里人眼中的怪物,因救人被毒蛇咬一口,也救了她自己

· 梦见一男人说自己来报恩的,并告诉我他出生后为什么会有病

· 故事:买的狗肉味道怪怪的,石头子破窗而入,才知自家大黑狗已死

· 挑战人类不太可能,人工智能没有情绪也无法理解世界!

· 禁止长时间停车,到底是多久?

· 王大雷求长高秘方,鲁能队友的回复亮了,这配图毫无违和感

· DNF最让玩家崩溃的七大瞬间,句句直戳玩家内心深处

· 贵阳近郊这个地方万种风情,游客去了感觉比五A区好玩

· 它不像一个酒店,更像一个旅行中的修行禅意文化之地丨成都朴院

· 电视荧幕上曾经的明星:拥有巨大弹盘的苏联轮盘机枪究竟怎样?

· 丹尼穿越了,从超越神灵的无尽法师,变成了一个瘦弱的魔法学徒

· 不要在意别人的看法,那不是你自己的活法

· 七夕到了,感恩遇见,让生命不再孤单

· 我月收入才6000,老婆却不想上班还要请住家保姆,心累!

· 被砸得头破血流 她第一反应竟是上传自拍

· 世界上最好的10所大学 亚洲的大学无一上榜!

· 金星与汉斯没有晚上生活?金星回怼:你们嫁给男人,我嫁给爱情!

· 阿布失单刀王万鹏头球绝杀 大连1-0深圳冲超在望

· 美媒关注中国留学生在美国创业:最大挑战是进军中国市场

· 王者荣耀新出:卧底模式

· 江南有美人,垆边人似月,皓腕凝霜雪

· “女人,为什么生完孩子后更想要”

· 不想生二胎的五大理由,请看清楚,这是现实,绝对不是“借口”!

· ‘14条句子,做个性签名很有范’

· 国际奥委会主席巴赫来京考察冬奥会筹办

· 十大顶级韩国男团

· 独家对话疯狂的小狗崔佳:三年成为全网第一,他是怎么做到的?

· “深水炸弹”之后,阿里能否“斗酒诗百篇”?

· 同样30万,冠道的性价比甩出汉兰达好几条街

· 巴萨求购阿根廷巨星,大巴黎看到报价哈哈笑,经纪人感觉受侮辱

· 温哥华房屋抵押贷款违约率创历史新低,疯狂的地产正面临失重风险

· 邓宗国:我为什么投资银行股票

· 即将退伍的你:离开军营前,这10件事一定要做……

· 被拆成8车废铁 为千万美元赏金 110名飞行员陆续驾机叛逃

· 运钞车路上遭遇翻车意外,村民急忙捡走硬币6万!

· 史上第一战神,无人能比,一人杀一国,活埋十二万敌军!

· 一锅鲜(豆角沾卷子)

· 故事连载:一个女人的江湖(十二、江湖讲的是明争暗斗)

· 从前不回头,往后不将就

· 心灵的释然

· 网友偶遇郑爽低调逛百货超市,网友:买对蒙奇奇过七夕

· 有料!《杀破狼|贪狼》构图,教我们这样看电影更有深度!

· 颜值就服他们!平平无奇古天乐在首位

· 1年的时间两家福特4S店去了N次,就为买到最优惠的锐界

· 世界各国首都是什么?

· NB球星酷爱带耳钉:乔丹霸气韦德风骚,最后一人完美诠释型男!

· 龙珠3:1击败SKT 创下历史 KT战队趟进S7的梦想破灭

· 陈冠希都变身女儿奴,带娃的样子让不少宝妈都服气!

· 血小板减少,阴阳两虚怎么调

· 五律:醉吟

· 与你相遇,是一场忘不了的情缘

· 那夜的月色很漂亮,让我不禁想起了陪你看星星的日子~

· 那些完爆小鲜肉的不老男神们,如今他们都有多大年龄?

· 2017福布斯中国慈善榜丨腾讯公益第一,李彦宏刘强东未上榜!

· 预售15.37万起,东风雪铁龙SUV天逸“不简单”呐

· 韩国锐度强势对抗中国厚度 期待国手稳定发挥

· 图解胸衣的详细制作教程

· 都说吃手是宝宝聪明的表现,但这时候还在吃手,毁的不仅仅是颜值

· 急性胃肠炎怎么治?

· 日本相扑员真实生活,为了荣誉他们放弃健康,大多活不过50岁

· 古风微小说:傻丫头!我只是怕我死了,天下再没人疼你!

· 七绝 飞枣

· 11秒分解组装手枪,90后女特警与男特警格斗训练钢筋铁骨,生活中多才多艺爱自拍

· F1比利时排位赛:汉密尔顿杆位 维泰尔前排 F1比利时站排

精彩图片