DotA2团战人类也打不过AI了？最全解读带你看懂AI修炼手法和局限

夏乙 问耕 发自 凹非寺量子位 出品

| 公众号 QbitAIGG。

随着人类喊出这两个字母，一切都结束了。

OpenAI开发的人工智能团队在5v5Dota2团队战中首次击败人们玩家团队。

这是一件里程碑式的事情。

这个能打团战的AI叫OpenAI Five，OpenAI的最新研发成果。

OpenAI Five通过自我对抗完全学会了打Dota2，每天的战斗量相当于人类180年。

而且惊人的硬件使用量，也应该是创造记录:256个GPU和12.8万个CPU...人们又一次完全陷落了吗？显然，Dota2团战AI战胜人并不容易。

每个人都分为三个部分，带来最全面的分析。

第一部分：OpenAI Five有多强？第二部分：现在去TI打专业队有戏吗？第三部分:AI一日，人间180年。

Dota2团战AI有多强？也许真的超出了你的预期。

让我们详细解释一下。

团战不假团战，需要综合运用技能、装备和跑位，最大限度地损害敌方英雄，同时避免本方英雄的损失。

来说实战。

这是人工智能守高地的一波战斗。

当时人们的团队装备和水平都比较高。

而且五个人的玩家都聚集在一起，准备强行拆塔。

双方一接触，AI只有一个23级英雄，人民团队24级巫妖（Lich）先刁难，施展“阿托斯之棍”，将AI一方23级巫妖定在原地。

随后，AI巫妖向自己释放了“EUL神圣魔杖”，使自己卷入沙尘暴，暂时处于无敌状态。

根据这一举动，人工智能的目的是抓住人们的团队，给他们的队友时间获胜。

随后，人工智能巫妖继续将人们的团队拖上高地，引诱人们的玩家充满信心。

其他人工智能英雄开始从后面复制人类团队。

人工智能冰女绕后（Crystal Maiden），拖延人们团队的火枪（Sniper）率先施展“闪动短刀”，然后用“冰冻禁制”冻结狙击手，然后是“黑皇杖”，最后施展“极寒行业”，召唤冰霜轰炸。

AI冰女释放的“极寒产业”，以及AI毒龙（Viper）释放的“幽灵有毒”迫使人们的团队分散。

因此，AI火枪可以从间距上进行范围攻击。

在高伤害和群控攻击下，人们的火枪和冰女想要撤离，但只能以被杀告终。

随后，在没有视线的情况下，AI冰女应用“冰霜新星”，杀死了人们的巫妖。

随后，人工智能冰女拒绝放弃，出现了最后一个追逐人们的英雄死灵法师（Necrophos），但在冻结对方后，AI冰女早已没有技能可用，只能放弃追捕。

最后，在这场团战中，AI打了人们玩家一个2换4，守家成功。

诡计多端遇到打不赢的时候，人类英雄躲在山林里想避开，没用。

即使人工智能英雄失去了视线，也会一路追进山林寻找，然后杀人。

看到人工智能丝血，人们想要追逐，一定要小心，因为其他人工智能英雄正在赶到抓人。

人们的玩家不仅不能接受头部，而且还会死亡。

重点是人工智能还学会了“先抓贼先抓王”，愿意应用多重大招，只是为了保证能杀死等级最高的敌方英雄。

人工智能英雄也将致力于诱惑人类玩家走出高地，以确保团队中其他人能够成功地拆除塔。

总之，OpenAI Five又能团，又能gank，足智多谋，诡计多端。

事实上，根据官方声明，目前OpenAI Five在选择攻击目标时，达到了专业能力，但补兵能力也不足。

去TI打专业选手有戏吗？在回答这个问题之前，我们必须明确一个事实：OpenAI Five击败的敌人并不是人们的顶级大师。

大约两个月前，彼此的战斗开始了。

目前OpenAI Five先后与五支人类队伍相遇：1、OpenAI最强员工队：MMR配对分数 25002、最强观众：MMR 4000-60003、Valve员工队：MMR 2500-40004、业余队：MMR 4200，团队训练5、半职业队：MMR 5500，4月23日，有团队训练，OpenAI Five首次击败了脚本基线版本。

5月15日，与第一队形成1:1。

5月15日，与第一队形成1:1。

6月6日，与第1、2、在三队的战斗中，都取得了胜利。

可以看到OpenAI Five一直在进步。

这个人工智能和第4、第五队展开了一场非正式的比赛，虽然没有赢，但在前三场比赛中赢了两次。

与人类玩家相比，OpenAI Five平均每分钟可操作150-170次，平均反应速度为80ms，确实比人快。

但这些都不是决定5v5胜利与否的重要因素。

OpenAI还总结了OpenAI Five的几个特点:为了抑制对手的优势道路，迫使战斗转移到对手难以防御的一边，反复牺牲自己的优势道路(噩梦军团上路，天辉军团下路)。

从赛事前期到中期的转换比对手快。

方式：(1) 成功的gank玩家数次 (2) 在赶上对手聚集之前，在线拆塔。

还有一些非主流玩法。

比如前期把钱和经验交给辅助英雄。

OpenAI Five的优先级使伤害值能够更快地攀升，从而获得团战等。

然而，这样一支强大的队伍当然不是和业余爱好者一起玩的。

OpenAI表示，他们计划在8月份去DotA 在顶级赛事TI上，找一支顶级专业团队PK，7月底进行专业团队对决直播。

自然，所有英雄OpenAI Five暂时还是不懂，和专业选手比赛，彼此也只能在有限的英雄中选择。

目前还不清楚当时有多少“有限英雄”，但这也说明了一个非常重要的问题:现在OpenAI Five能力不足以玩人们版的Dota 2。

那么，人工智能现在玩Dota 与人类版相比，有哪些简化？OpenAI最终在博客上列出了AI版DotA的限制:英雄阵容不变:死灵法师、火枪、毒龙、冰女、巫妖(学名为瘟疫法师、矮人狙击手、冥界亚龙、水晶室女、巫妖)；不插眼；没有肉山；没有隐身装备；没有企业，没有幻想；缺少一些物品:圣剑、瓶子、补刀斧、飞鞋、经验书、眼泪；有五个不可战胜的信使(鸡)，但不能用于侦察或防御；没有扫描。

这是什么意思？

这是什么意思？有了这些限制，人工智能的Dota比人类版本简化了很多，这也表明人工智能也没有掌握一些技能。

例如，英雄选择阵容搭配。

只有五个英雄互相固定，所以不需要掌握英雄之间的合作和抑制，游戏变化也少了很多。

人工智能还不知道如何操纵视野。

人工智能游戏版本没有隐形设备，没有插入操作，没有扫描，所以彼此只能在游戏的原始视野中决斗，不能依靠自己的能力来改变视线，也不需要侦察。

在游戏中，如果不考虑信使，人工智能只能控制5家企业，这就是为什么没有召唤单位和幻觉。

另外，没有游戏野怪最厉害的怪物肉山，也没有打肉山能得到的复生盾。

在职业比赛中，复生盾带来的复生能力可以说是翻盘神器。

让人类职业玩家玩这样的Dota没有优势；如果让现在的OpenAI Five打人版Dota，这个没学过选英雄、做视线、偷鸡等技能，还少学了很多装备队伍，也会不知所措。

然而，OpenAI也表示，这些限制大多是由于游戏中的一些部分尚未整合，他们会尽快添加职业比赛中的关键元素，如插眼和肉山。

人工智能一日，虽然人间180年还有很多限制，但不可否认的是，人工智能的发展还是快得吓人。

OpenAI的解释是，人工智能通过自我对抗逐渐从随机参数中提高，不需要人们玩家的指导或搜索。

他们还特别提到，在练习1v1模型时，是专门为卡兵这一操作设置奖励的。

但是OpenAI 这个奖励在Five模型中没有，但这个新模型还是知道卡兵。

人工智能的日常训练量相当于玩180年游戏。

可以说，努力学习，人们一生的训练量不如半天。

这些每天训练180年的选手是什么怪物？他们的长相是这样的:不要被框架图吓到。简单来说，每个选手，也就是每个智能身体，都是这样的。（agent），它们都是单面LSTM(长度记忆网络)，有1024个单元，可以通过Valve通过Bott。 API观察当前的游戏情况，操纵英雄接下来选择哪个操作，释放到XY坐标系。

智能身体可以看到与人类相似的信息，包括自身、同伴和敌人的情况，如位置、血条、攻击、盾牌、携带物品、能力等。

可能会有一点区别，就是智能体记得比人类更清楚过去12帧的血量、攻击、攻击等历史信息。

对于智能体来说，这些数据是一个包含2万值的目录，其判断后发出的行动命令是一个8值的目录。

选手的训练采用了扩展版的近端策略优化（PPO）这也是OpenAI现在默认增强学习训练的方法。

这类智能体的目的是最大限度地提高未来奖励指数的衰减。

人工智能选手在练习中吃得惊人，需要256元P100 关键是GPU和12.8万个CPU。

与1v1版相比，上面的5v5版有一个令人欣慰的结果：OpenAI 与去年击败Dendi的1v1版相比，Five所需的CPU和GPU计算能力并没有翻出5倍。

经过五次智能体训练，两者是如何配合的？我们不能像组队一样互相说话吗？答案是，没有人们能理解的沟通渠道，而是由“团队精神”超参数统一操作。

许多OpenAI表示，他们已经准备好在7月28日与顶级球员进行对决，留给他们整整一个月的时间。

今年8月，他们还将在TI上与顶尖的专业选手交锋，如果在AI结束后，交给AI还有两个月的时间。

根据“世界一天，人工智能世界180年”算法，加上肉山、插眼等关键元素，只需要给人工智能半个月的时间与自己竞争，就可以说在世界上培养了“几千年”。

这场决斗还开始了直播，等待与人类观众见面。

丰富的工作经验等着你开始~工作地点在北京中关村。

欢迎将简历送到quxin@qbitai.com的具体细节请在量子位微信官方账号。(QbitAI)对话页面，回应“见习生”三个字。