击败DotA2顶级人类玩家,并不是AI的一次突破

量子位   2017-08-13 11:42

作者:Denny Britz,前谷歌大脑团队成员

问耕 编译整理

量子位 出品 | 公众号 QbitAI

击败DotA2顶级人类玩家,并不是AI的一次突破

工作人员手里举着一个U盘,装在里面的就是击败了人类DotA 2顶级玩家的人工智能程序

当我昨天看到OpenAI的人工智能,在一项奖金2400万美元的电子竞技赛事上,击败DotA2人类顶级高手时,整个人感觉超兴奋。

这是因为,一方面我是一个电子竞技的粉丝。尽管没玩过DotA 2,但我经常在Twitch上观看其他其他电竞赛事,高中时我还当过一阵半职业选手。

更重要是的,像DotA这类多人在线战术竞技游戏(MOBA),以及星际2这类实时策略游戏(RTS),通常被认为远超目前人工智能的驾驭能力。因为这两类游戏需要长期战略决策、多人合作,比国际象棋、围棋有着更复杂的状态和动作空间。

DeepMind已经在星际2上研究了一段时间,前不久刚刚发布了新的进展,但目前为止,相关研究还没有取得重大突破。大家普遍认为,距离人工智能在星际2上吊打人类顶级玩家,至少还有一两年的时间。

这就是OpenAI这个成果如此令人震惊的原因。这是怎么回事?最有有什么人工智能方面的突破是我没有注意到的么?于是我开始研究这个DotA 2人工智能到底干了什么,它是如何训练的,以及在什么样的游戏环境中运行。

我的结论是:这是一个令人印象深刻的成就。但不是一次AI上的突破。

通过这篇文章,我想提供一个关于此事的清醒解释。实际上,过度炒作人工智能的进步才是真正危险的事情。例如,下面这位在推特上的发言,才是真正的误导。

击败DotA2顶级人类玩家,并不是AI的一次突破

这是伊隆·马斯克的推特,这位硅谷钢铁侠不单创办了特斯拉,而且创办了OpenAI。上面这篇推特中,马斯克大意是说:OpenAI搞出了史上首个击败电子竞技顶级玩家的人工智能。这比搞国际象棋和围棋什么的复杂多了。

击败DotA2顶级人类玩家,并不是AI的一次突破

在第二条推特中,马斯克再次发表曾被AI届猛轰的观点:没人喜欢被管制,但对公众构成危险的一切(汽车、飞机、食品、药物等)都应该受到管制。AI也是一样。

(插播:当然,马斯克还发了一条,量子位就不翻译了,贴图如下)

击败DotA2顶级人类玩家,并不是AI的一次突破

首先要声明的是,我今天要谈及的炒作或者误导,并不是OpenAI研究人员的错误。OpenAI一直在研究方面都有诸多贡献。目前,OpenAI还没有公布他们解决方案的细节,所以外界很容易就会得出错误的结论。

现在开始切入正题。我们先来看看DotA 2的人工智能程序,到底解决了一个多困难的问题?尤其是与AlphaGo相比。

1v1不能与5v5相提并论

在正常的DotA 2游戏中,两个对抗的队伍各由五名玩家组成。游戏过程中需要高级策略、团队沟通和协调,一局比赛通常要45分钟。

而这次人工智能击败人类的比赛,采用了1v1的模式,这种模式有太多限制。例如双方基本上只能沿着单线前进,并尝试击杀对方,游戏过程几分钟就结束了。

在1v1模式中,击败对手主要靠机械技能和短期策略,并不涉及长期规划和协调,而后者才是对当前AI技术来说最具挑战性的部分。

事实上,在这次的人机DotA 2对抗中,可以采用的有效动作数量,少于围棋人机大战;有效的状态空间(目前局面情况),如果以智能的方式表示,应该比围棋要小。

AI可以获取更多信息

OpenAI的人工智能程序,极有可能是构建在DotA 2原有的机器人接口之上,可以获取更多人类玩家看不到的信息。即使OpenAI的研究人员限制了这些信息的获取,人工智能仍然能够得到比人类更精准的信息。

例如技能的施放,人类玩家必须紧盯屏幕,并且估算与对手之间的距离。而AI知道确切的距离,并且能立即决定是否施放技能。获得精准的数字信息是一个很大的优势。其实对战过程中你就能看到,AI有几次攻击都是在最大距离上展开。

DotA 2人机大战全程回放,请访问量子位公众号(QbitAI)查看。

反应时间

AI可以立即作出反应,人类不行。再加上刚才说的信息优势,AI的优势进一步扩大了。比方,一旦对手逃离攻击范围,AI可以立刻取消攻击命令。

使用单一英雄

DotA 2中有上百种不同的英雄角色,各具不同的能力和优势。而AI掌握的只是其中一个英雄:Shadow Fiend(影魔)。影魔通常会立刻展开攻击,而不是在一段时间内学习掌握更复杂的攻击技能,这更加有利于发挥AI在信息和反应方面的优势。

所以,鉴于1v1主要比拼机械技能,AI击败人类玩家并不奇怪。鉴于游戏环境被严格限制,造成一些列战术和策略也被限制,而且对战中几乎没有必要进行长期规划或协调。

击败DotA2顶级人类玩家,并不是AI的一次突破

DotA 2中的影魔

再次重申我的结论:这次AI击败DotA玩家,比在围棋中击败人类冠军要容易得多。人类没有在AI领域突然取得突破。

这次在DotA对抗中之所以AI获胜,是因为研究人员聪明的设置了问题,使得AI可以绕过目前人工智能的技术限制。

据说这个OpenAI训练这个AI打DotA花了2周。与之相比,AlphaGo在Google的GPU集群上进行了数月的分布式大规模训练。两个程序之间的计算要求有着数量级的区别。

好吧,最后夸夸这个会玩DotA的AI,到底有何精彩之处?

完全通过自学训练

AI不需要任何训练数据,也不会从人类的比赛中学习。整个学习过程随机开始,并且通过和自己对抗进行学习。虽然这不是什么新技术,但令人惊讶的是,AI学会了人类玩家已经在使用的技术。这很酷。

AI可能还有其他技术,甚至人类都不知道。这与我们在AlphaGo中看到的类似,围棋选手已经开始学习AI的下棋方式。

AI+电竞的重要一步

在具有挑战性的环境中(例如DotA 2和星际2)来测试AI技术是非常重要的。AI可以为游戏提供更多的价值,游戏也会助推AI更快发展。

不完美信息

在DotA对决中,人类玩家智能看到地图的一小部分,视线受到妨碍。AI可能也一样,虽然还不清楚OpenAI如何处理这个问题的细节。

这意味着与围棋、国际象棋、Atari游戏机等环境不同,AI在DotA中处于一个部分可观察的环境,而无法获知关于游戏当前状态的完整信息。这类问题通常难以解决,话虽如此,但目前还不清楚1v1的DotA 2比赛中,视野的重要性到底几何。

不管怎样,非常期待看到OpenAI关于这次比赛的技术报告。

—— ——

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI

վ'ᴗ' ի 追踪AI技术和产品新动态

内容推荐
更多阅读

· 火箭15年来仅一新秀完成续约,一人最遗憾,卡佩拉恐步其后尘

· 布冯:意大利队必须要参加世界杯

· 70年代的阿富汗喀布尔街头,战前那里也曾是个自由富足的幸福国度

· 蒋勋:活出自我的秋瑾

· 寒露一来,怕孩子感冒?学会这一招

· 清秀疏旷:明 董其昌 晚年行书《唐五律诗册》书法欣赏

· 留学费用最贵的十个国家,多留学几年,学费都可以买一套房子了!

· 农村城市化,农民工人化,农业产业化,工业现代化的村庄

· 盘点这些年和郭德纲撞脸的人,笑的合不拢腿,最后一位还是清朝的

· 曾和王菲、高圆圆传绯闻,妻子是窦唯亲妹妹,迷倒莫文蔚、瞿颖?

· 你所熟悉的兰博基尼、布嘉迪等大跑车,都改装成了大脚越野车!

· 萧华不想想怎么去商业化,却拿NBA82场常规赛开刀,球迷炸了

· 使用微信,五种操作要担心啦

· 一神秘小村庄,日军想攻打却找不到入口,据说与诸葛亮有关

· 米亚罗之旅,走进神奇的红色梦幻走廊,领略藏羌文化明珠的魅力

· 今天我们可爱的妹妹出嫁了,你准备好了吗?

· 雪铁龙C6好不好?车主这样说

· 比起全新XC60能卖多少,我更期待它的价格能挺多久

· 捷豹XFL说,我要打十个!首先,你,你,你!

· 王治郅曾在NBA有多强?杨毅:当年在小牛,诺天王不一定比他厉害

· 英首相特雷莎·梅党首地位动摇,暗示或将外交大臣鲍里斯降职

· 地下城手游《阿拉德之怒》,又是一款烧钱刷图的游戏!

· 省中医郭主任:宝宝流口水止不住?教你4款汤水轻松止口水

· 风景图集:浙江云和湖仙宫景区,碧波荡漾,晶莹似镜,太美了

· 汉奸组织“新民会”活动照片,吸收青少年,曾受纳粹德国官员接见

· 桂林山水你们了解多少

· 大神,把玛瑙雕成这样,请收下我的膝盖!

· 奇妙宇宙|夜晚献上一波宇宙系列壁纸 去探索未知的美

· 民警用一个小时送迷路老人回家,老人拿出100元感谢

· 8部曾看过的台湾杀马特偶像剧,满满都是回忆,你们看过几部呢?

· 和邦生物:15.44亿股限售股将于12日解禁

· 你所不知道的军人十大细节,个个让你泪目(八)

· 大方捐款280万的郭德纲 其实买表也不手软

· 这些游戏名都被玩家玩坏了 知道上古卷轴5为什么叫老滚5吗?

· 挖藕工日挖上千斤藕,背后的辛酸只有自己知道

· 清新北欧风,原木、绿植、简约又充满生活情趣

· 美如仙境的——长白山

· 有种过节叫在海边往网套里装海蛎子,看来靠山吃山靠海吃海都不易

· 杜高犬用鲜血与生命在谱写着猎犬之王的传奇

· 缅甸FDA查获销毁大量含化学成分的血旺,但有很多流入市场

· 美甲配戒指,精致又时髦!

· “我们一家人出去吃,你怀孕了毛病多,我妈嫌带你去太扫兴”

· 水原希子新图集

· 摄影图集:嫂嫂的作品,大自然之美

· 第14届墨西哥湾国际龙舟赛在休斯顿举行

· 毛晓彤关晓彤,叫晓彤的最近都火了,就差他了!

· 史上最完美的微信自动赚钱系统!

· 窝囊!3万人猛攻8千人,结果只砍死5人,自己死3千人后溃败

· 直击史上最牛B的诈骗犯:在戒备森严的狱中,伪造公函将自己释放

· 男人都喜欢的枪械美图!

· 一百多万的奥迪Q7!光音响价值十多万!

· 宝爸宝妈要注意!10天内市应急办连发两次提醒,手足口病高发期到了……

· ps教程 合成被橙子拉链包裹着的苹果

· 加西亚背靠背连夺武网、中网冠军 哈勒普未能携冠登顶

· 嘴上坚决不承认,情报机构却加紧处理,驻叙俄军到底有没有被俘?

· 小粗腿|秋冬穿这些裤子最遮肉!

· 30岁之后,你还玩游戏吗?

· 佟丽娅儿子朵朵近照,皮肤白皙不过瘦了好多,还好不像陈思诚

· 职场上有5类人永远得不到领导的重用,有你吗?

· 济南秦琼祠门口为啥没有石狮子 而是两个石头

· 游在德国的秋天 美的让人心醉

· 美人鱼发色清凉时尚,只有白皮妹子可以Hold住!

· 朝云寺葫芦之谜(民间故事)

· 人到中年也疯狂,自驾飞度奔西藏——序

· 灰熊愿接纳安德森送出“大白熊”!两条件,让莫雷叫停交易!

· 印度女孩大义灭亲,却被父亲泼硫酸,毁掉半边脸

· 17岁男孩与16岁女友驾车亲热坠落悬崖 仅受皮外伤

· 芭莎90秒 之大牌云集的2018春夏米兰时装周盘点

· 没有什么功劳的曾国藩,为什么敢大骂咸丰皇帝?胆子太肥

· 全国高血压日:高血压,人类健康和生命第一杀手

· 盘点世界上最有特色的十大自动扶梯 连自行车都可以坐扶梯了

· 淘汰还是坚守?DNF那些现版本依然强力的异界套

· 20岁少女与六旬老人同居后怀孕,希望孩子长大后能为社会做贡献

· CBA季前赛具体赛程正式出炉

· 拥有这几种手相的女人人一生不缺钱花,你认为呢?

· 海贼王让卡普战国联手迎战的两大强者,身上都有排行第一的记录

· 6岁的小女孩,经纪公司说愿意等10年,妈妈真容被曝光

· 亚历山德拉·安布罗休海滩度假,网友:她走到哪都是美景

· 且看张仪向楚王借盘缠的故事

· 史前咬力最强的恐怖食人鱼,名副其实的骨头粉碎者

· 外婆家的旧时光

· 8张图,告诉你梦想其实不遥远

· 大家好,给大家介绍一下,这是你可能去的下一个国家垃圾群岛国

· 霍启刚前女友家族丑闻 牵扯出豪门婚姻利益内幕

· 相机没WIFI也能无线传照片?!YES YES YES!东芝FlashAir轻松来解决

· 皇上的卧室竟如此狭小,不是节俭,而是风水原因

· 伦敦有家新疆菜,“把整个新疆都搬过来了”

· 魅力黄龙 丹云峡景区掠影

· 鱼之乐图:厦门地铁来了,爱上城市之旅

· 推女神徐妍馨,普吉岛旅拍,调皮可爱的女神

· 河南开封旅拍印象:品味满满的宋都风情味道

· 美图绘:戴帽子的二次元女孩

· 相对于洋快餐,我觉得中国的传统美食完爆它们,你们觉得呢

· 北流农信社:走村入户发放社保卡

· 8-0直接将橙衣军团送出局,33岁小飞侠或就此告别国家队

· 1-8月西永综保区外贸进出口值1052亿元

· 锂电池+5G+三季报=赚钱!

· 中国工人赴以色列建房,为何必须避开巴以争议地点

· 不能生育的女人,男人真的会不在乎?

· 西南地区最大的开放式城市中心公园重庆中山公园

· 风景图集:山东解放阁,济南标志性的建筑之一

· 原来“伤害”能记多年,甚至一生,太惊悚了

· 渣男,我虽然是东莞的,也不是倒贴的,敢说我廉价!

· 阿里飞猪升级未来酒店 智能家居设备将如何改变中国的酒店业?

· 辰森杜晓明:餐饮服务市场呈现蚂蚁格局,当竞争成常态,市场才会成熟

· 中国重磅报道电磁弹射歼15,官方自豪地称取得世界领先的重大突破

· 这些影星的共同名字是中国人,请不要去伤害他们

· 给孩子买童衣童鞋,应该买便宜的还是贵的?

· 女孩每天用艾叶来泡脚,15天后身体出现了惊喜的变化!

· 沃尔沃和陕汽重卡又“火”了一把,开张吃三年!

· 谁说种地不会发财,小伙种大豆,带领全村致富

· 鹿晗和关晓彤是真的啊!流量小生公布恋情后,粉丝还好吗?

· 重磅:骑士最佳筹码首轮签变故,引援补强做最后一搏!

· MMA新星要把一龙打出屎 嘲讽:假和尚不是说会金钟罩么?

· 经典难忘,致我心中永远的《大时代》

· 新玉米价格暴跌已成必然 后续的市场行情会怎样?

· 中国的国之利刃,性能先进走向世界前列

· 2个月内5次恐吓这个国家:难道特朗普真的要动手?

· 魔兽争霸中的10大被动技能 剑圣的跳劈在第一名面前就是渣渣!

· 去10000次都不会腻的11个地方

· 中秋节孙女去看望独居的奶奶,老人家忙活半天,做汤就做了两样!

· “意外怀孕老公是些样对我的”

· 10月、11月为何是血压最不稳定期?省中山医院周三举办有关血压控制大型讲座和义诊

· 直击警营,零距离体验深夜拉动锤炼快反精兵

· 小长假结束从农村老家带回城里的特产:满满的都是妈妈的爱,感动

· 掘金续约加里-哈里斯,4年8400万

· 小身躯大能量,演技就是《呼啸》女主卜冠今的内增高!

· 靳梦佳低调只是假象,因为芒果台太高调捧新人,一般都会扑街!

· “薅羊毛日记“:最近在京东购过物的你,都可以这样领红包!

· 世界杯快要战罢两站却仍未见金 中国冰刀有点儿“急”

· 悠长假期变悠长工期 泰达只为保级生死战

· 读懂《共赢式薪酬》就读懂了中国经济未来

· 遇上打野车队,五大刺客阵容,网友:躺着也会赢!

· 前期称霸后期残废5大英雄,拿到千万别拖到后期!

· 消失了50年的卫星突然向地球发出信号,网友:被外星人劫持了

· 我的二胎养成记

· 谁说在武汉不走高速就看不到美景 这个小镇国庆8天迎客破十万

· 塞尔维亚菲利普王子大婚 与新娘甜蜜对视浓情蜜意羡煞人

· 国家队集训添新伤 曼联主力伤情更新 卢卡库是否赶上对利物浦成疑

· 《追龙》凭口碑逆袭成功,王晶翻身成国庆档最励志!

· vivo x20线下太火:专卖店已被鹿晗粉丝逼到想报警!

· 长假刚结束,流量就用完了,仔细估算流量成本,呼吁流量降价!

· 标致4008,车主真实反馈优缺点感受有没有很差?

· 爱车的人注意了:卤素灯正在夺走了你的性命

· 神华等多家大型煤企下调北方港市场煤价10元/吨

· 费米悖论:难道宇宙只有地球存在生命?

· 女友上门送了一个电水壶,爸妈很开心,去逛了趟超市,我们分手了

· 八旬老人为外孙办酒席准备的食材,最后走的时候,我给了500块钱

· 轮椅世界小姐比赛结果揭晓,她获得了第一届轮椅世界小姐冠军

· 故事:路遇卖鞋垫的老人,小伙买了几双,捡回了一条命

· 别人的嘴,爱咋说咋说

· DNF绝对锻8成功,盘点五大游戏中的神券!

· 汽车图集:宝马7系 2017款 740Li 领先型

· 58同城中甲:英格兰、皇马主帅领衔 盘点中甲出现过的顶级教练

· 看法国街头戒备森如临大敌,方知祖国的安全有多重要

· 旅游度假选择哪?带你畅游泰国普吉岛,领略珍宝岛的魅力

· 范冰冰可谓人生赢家,拥有美满的爱情和事业

· 黄金周京城突然降雨降温,路人措手不及各式避雨方式令人称绝

· 赛人向我推荐一部红色年代的电影,把我看呆了

· 齐仲龙:黄金连跌4周见底,下周反弹看向1300

· 《海贼王》猜测革命军基被摧毁的一些事,这是革命军挖的坑

· “零元团”寒冬将至,巴育下达最严令,誓将其赶尽杀绝!

· 经典街机游戏中的人气角色,谁的发型能代表一个时代?

· 《绝地求生》外挂卖家跑到游戏中推销 跑得比汽车还快

· 39岁孕妇二胎刚刚生下男孩,只听咳嗽一声,医生顿时吓坏了!

· 湖北宜昌市民在郊外采挖野葱 巧手做成美食野葱煎鸡蛋 香味浓郁

· 这个假期,回老家过得恬静踏实,村里还有了新变化

· 我国结婚登记数连续三年下滑

· 二战德军在苏联的暴行——难怪战后要对其疯狂报复

· 这个美国小镇竟比迪拜还要壕,家家用飞机当交通工具!

· 大山里的村庄,一个月才能赶一次集,牲口散养,吃饭牛羊绕身旁!

· 贫贱家庭百事哀

· 我出车祸后截肢,女友不离不弃,晚上无意听到一番对话,我生不如死

· 品赏1300米,收藏2年的“鸭屎香”

· 四方框框|黑泽尔·汤森~魅力出镜标准晚报杂志,2017年10月刊

· 佳人:你的眉目如画之美,让人瞬间倾倒

· 苹果宣称iphone爆裂问题可能是运输所致?你怎么看

· 9月汽车销量排行,这辆国产车销量完美逆袭,你肯定想不到

· DOTA2全动图 拉比克招式40连,没有什么角色是我模仿不了的

· 旅游见闻:中国二线城市最多的省份,人均收入连续16年全国第一

· 「妈祖宫庙」莆田妈祖宫庙大全——湄洲妈祖祖庙

· 高尿酸需谨慎,阶段不同饮食不同

· 唐诗宋词中流传千古的名句妙语,通俗优美,耐人寻味!

· 世界罕见的七种花,你见过几种?

· 娇艳的鹦鹉,你绝对没见过!

· 视觉日记|纳塔利娅·乔巴努~油画质感摄影作品赏析

· 郑州黄河风景名胜区多个节庆活动,引爆十一旅游季

· 没有过户的二手车撞伤人应由谁担责

· 两弹一星元勋,个个都是值得敬畏的国宝级科学家,如今健在仅五人

· 军营里面初过节,新兵满脸笑呵呵

· 米杨:女排的“逆转女王”

· 银川之行——海宝公园赏晚霞

· 所有事情都很低调,唯独爱你这件事不会

· 英菲尼迪QX60混动版,省油又顾家的好“爸爸”

· 从未入选全明星的JR替浓眉哥操心!难不成詹姆斯已经有了人选

· 韩国选手暗算中国选手 可她不甘示弱反击 靠对手摔倒夺冠

· 中超外援创造新历史!100秒上演了乌龙球梅开二度

· 陆家嘴财经早餐2017年10月8日星期日

· 这5种食物,竟能治五种常见病,效果堪比吃药!

· 真实的抗战多不易:这些古老的冷兵器你认得几个?

精彩图片