雷神之锤3战场AI夺旗团克服率超过人类
雷神之锤3战场AI夺旗,团克服率超过人类
[摘要]原标题:DeepMind新突破:雷神之锤3战场AI夺旗,团克服率超过人类 ? ? OpenAI战队在5v5刀塔比赛上打败人类,才是几天前发生的事。 如今,DeepMind为了训练AI电竞的 团魂 ,也已把触手伸向了雷神
?
?
OpenAI战队在5v5刀塔比赛上打败人类,才是几天前发生的事。
如今,DeepMind为了训练AI电竞的团魂,也已把触手伸向了雷神之锤3竞技场。
DM的强化学习智能体,不止要和AI队友一起攻打人类的阵地,也要和人类队友并肩作战。
??
最少,在夺旗 (Capture the Flag)比赛中,AI的胜率比人类高。
而且,这里的比赛,比原版游戏还要复杂多变。
拔下对方的大旗
DeepMind团队这次选择的雷神之锤3竞技场,是款3D第一人称多人游戏,也是培育AI团战技能的好地方。
其中的夺旗游戏,两队的目标都是拔掉对方的旗子,将己方旗子守在自己的大本营。
我是蓝方,就需要标记 (Tag)扛着蓝旗往回跑的红方敌人,我方的旗子才能失而复得。
?
?
如果红方把蓝旗搬到了他们的阵地,就不好了。所以,队友之间要紧密配合才行。
规则其实很简单,但场景的变化很复杂。
不过,DeepMind团队还想让情况更复杂一些,给AI更有 (bian)趣 (tai)的锻炼。
因而,夺旗游戏的地图上,产生了一些可爱的改动。
各种地图,训练有素
每场比赛之间,地图都会产生变化。这个变化,是随着比赛的进行生成的。
?
?
这样一来,智能体要学会应付,许多没有见过的新地图。
DeepMind的强化学习模型,有三个要点
第一,既然是团战,固然要把几只智能体扔进竞技场一起训练。
它们要学习,怎样和队友亲密互动,打击敌人。
?
?
第二,每个智能体要学习,它自己的嘉奖信号,建立自己的小目标,比如拔掉对方的旗。
优化进程是双层 (Two-Tier)的,可以优化智能体内部的嘉奖,让嘉奖信号更直接地指向胜利。
第三,智能体在两种节奏里面运行,一种快,一种慢,这样可以增强它们应用记忆体、生成稳定的动作套路,的能力。
?
?神经络的架构,称为FTW (For The Win) ,为了赢 (字母顺序不要颠倒) 。
这里,有快速和慢速训练用的RNN,有一个同享存储模块,可以学习怎样把游戏中的某个点,转换为相应的嘉奖。
稳胜人类一筹
训练好的智能体,就做好了赢的准备。
面对地图大小的变化,队友数量的变化,和敌方的变量,都表现出训练有素的模样。
?
?
这是户外地图,红蓝双方都是AI,斗争非常剧烈。
室内地图,则是AI与人类选手组成的混合战队,与纯AI战队的斗争。
?
?
DeepMind这次一共动用了**40个人类加入战役,与AI随机组队。看得出他们的比赛其实不轻松。
终究的结果,人类胜率不及AI。
?
?
另外,不管强大的人类,还是普通的人类,Elo评分都没有FTW那末高。
AI为何赢?
除了看到AI拔旗比人类利害,团队还想知道,它们是凭什么赢。
因而,就研究了AI的行动模式,视察一下它们是怎样理解比赛的。
?
?
各种颜色的点点,分别代表,旗在阵地,队友扛走敌方大旗,本身处在敌方阵地等等。
不同战况之下,AI的反应明显不同。安全和危险,分得清清楚楚。
乃至有一些神经元,是专为某种特定境况而生的。
没有人教过AI,比赛规则是什么,但它们仍然能够在训练中,产生战士的修养和自觉。
?
?
另外,团队还发现,AI的战斗力虽然是在非监督学习中炼成的,但它们也像人类一样,会跟着队友走,会在敌方阵地上顽耍,如此种种。
果然,即便再放养,AI的爸爸也还是人类吧。
?
?
完
加入社群
量子位AI社群18群开始招募啦,欢迎对AI感兴趣的同学,加小助手qbitbot8入群;
此外,量子位专业细分群(自动驾驶、CV、NLP、机器学习等)正在招募,面向正在从事相干领域的工程师及研究人员。
进群请加小助手号qbitbot8,并务必备注相应群的关键词~通过审核后我们将邀请进群。(专业群审核较严,敬请谅解)
实习生招聘
量子位正在招募活动运营实习生,策划履行AI明星公司CEO、高管等参与的线上/线下活动,有机会与AI行业大牛直接交流。工作地点在北京中关村。简历欢迎投递到quxin@
具体细节,请在量子位公众号(QbitAI)对话界面,回复实习生三个字。
量子位 QbitAI 头条号签约作者
?? ?追踪AI技术和产品新动态
宝宝积食不吃饭怎么办宝宝健脾胃推拿如何消除小儿积食小孩脸色发黄吃什么中药美白面膜
治盆腔炎用什么方法
右侧颈动脉斑块
儿童什么季节补钙最好
真菌性甲型灰指甲治疗方
幼儿拉肚子吃什么食物好
亮甲价格是多少
治疗灰指甲甲沟炎
称赞中医智慧!印尼国会为新冠患者提供藿香正气口服液等中国广泛使用的中药
千年古方的现代活力:“太极藿香正气液传统制作工艺”列入非遗名录
全球战疫:中成药成印尼抗“疫”抢手货 中国药企舍利捐赠
-
细谈狗狗的妊娠与分娩位置
一般出生后8~12个月雌犬性成熟,但也有6个月早熟或拖至18个月晚熟的现象。如果20个月雌犬仍未出现发情期应请教...[详细]
-
罗威纳多少钱一只参考价元位置
导读:罗威纳多少钱一只?参考价1000元-1800元!罗威纳犬是列入猛犬的大型犬,但很多罗威纳犬并没有那么猛,这...[详细]
-
能帮助杜宾犬洁牙的用品清洁骨位置
日常生活中,我们往往会忽略杜宾犬的牙齿健康,而且有一些主人可能没有忽略杜宾犬的牙齿问题,可饲养主们不...[详细]
-
苏格兰牧羊犬拉稀便便呈果冻状是什么毛病位置
2个月苏格兰牧羊犬拉稀有果冻状白色粘稠物,如何改善这种情况丫丫宝贝:为何要吃云南白药?苏格兰牧羊犬吃饭...[详细]
-
观赏鱼水霉病的症状表现位置
>金鱼(详情介绍)观赏鱼水霉病的英文名为Saprolegniasis,属于观赏鱼比较常见的传染病,该病主要通过接触传播,而水...[详细]
-
鳄龟吃什么长的快饲养鳄龟要喂什么食物位置
鳄龟吃什么长的快,鳄龟,属于水龟的一种,是很古老的爬行动物,它分为大鳄龟与小鳄龟。鳄龟因为外形似鳄鱼...[详细]