中国足球队获得世界冠军！
“最后，比赛结束时哨声响起。女士们，先生们，来自中国的WeKick足球队赢得了这次挑战的冠军。让我们祝贺他们。」
嗯，等一下，中国足球队？夺冠？你没看错。在AI世界里，来自中国的足球队WeKick这次冲出亚洲，在世界舞台上取得了巨大的成就。
此次活动由谷歌研究和英超曼城足球俱乐部联合举办，获得了冠军。这是在国际信息学挑战平台Kaggle上的人工智能足球挑战。共有来自世界各地的1138支队伍参加。
经过激烈的竞争，WeKick的比赛得分达到了1785.8分，让他们夺冠，把其他竞争对手远远甩在后面。
尤其是WeKick足球队的战斗表现和战斗精神更是令人瞩目。最后一场比赛，在落后两球的不利局面下，他们连进三球，最终实现了大逆转。
接下来我们来看看这个游戏，看看AI足球队是怎么踢球的。
连进三球，成功逆转
这场“人工智能控制的足球对抗”是在谷歌研究足球的帮助下进行的。这个平台其实是一个足球控制游戏，看起来是这样的：
但是AI眼中的对抗就不做作多了，数据的堆积和显示变成了这样：
在比赛中，我们国家的WeKick是红色的一面，我们的对手SaltyFish是蓝色的一面。后面的数字代表控制球员的球衣号码，足球是白色字母b。
好了，我们回到游戏。
双方是WeKick和SaltyFish。在派出的团队成员上，数值相同的双方没有区别。另外，双方都没有替代品。
萨尔特菲什在开场进攻中用三脚“传球”打破了韦基克的进球。这个目标来的太快了。
后来在另一次进攻中，虽然SaltyFish的第一枪“救”了，但比分进一步扩大。
情况似乎有点糟糕，因为WeKick现在落后0-2。
然而，别担心，我们在角球中踢回了一分。
半场结束前，WeKick通过精彩的“团队配合”成功扳平比分。
最后，在70分钟左右，WeKick利用一脚远射，成功反超了比分。最终，比赛也以这个比分结束了。
「传球」、「扑救」、「团队配合」、「远射」等等。这些正常足球场上会发生的操作，AI在游戏中操作起来也是娴熟无比。
这种操作技术和配合，要换做我啊，那肯定是随随便便......也办不到的啊。
那么，问题来了，这个如此强大的WeKick，又是何方神圣？
这个WeKick，究竟是个啥？
实不相瞒，这个WeKick的真面目，其实就是：「绝悟」。是的，不用怀疑，就是王者荣耀里面的那个AI绝悟。
简单理解的话，「绝悟」，是AI的一种底层架构与方法。
在王者荣耀的数据去训练的话，就是王者荣耀里的那个全英雄池的「绝悟完全体」，而如果用足球的数据去训练，就是这次比赛的「WeKick」。
在赛后总结中，「绝悟」的研究团队向大家揭秘了这个AI背后的秘密。它的出现，一共可以分为三步：
首先，是通过强化学习和自博弈（Self-Play），从零开始训练模型。
利用这个方法进行模型训练，是很常见的操作，本届比赛中的多数参赛球队，都采取了这个方法。
不过，对于足球运动，如果只由进球与否来决定成败的话，其实并不利于模型的训练。于是，「绝悟」的研究团队在价值估计（奖励模式）上，进一步进行细化。
比如：将拦截、出界、越位、过人、控球、传球等各方面都纳入考量，当然，进球这个最重要的评价标准也在其中。
评价标准多样化之后，AI在训练过程中能更快得到反馈，然后进行下一步操作。
简单来说，类似于将一整份试卷细分成了不同的试题，然后制定了一套评审标准。AI，也需要先从基础题型学起。
除了将奖励细分化，由于足球是一项团体配合的运动，所以「绝悟」的研究团队还使用了一种名为「生成对抗模拟学习」（GAIL）的技术来进行自博弈训练。
这项技术，可以模拟一些难以细化定量描述的战术，比如足球比赛中常见的「长传反击」、「控球渗透」等等。
通过模拟出不同战术风格的对手，然后让AI与其对抗，进行训练和学习。
简单理解的话，就是将不同题型依据不同的试卷风格进行排布组合，然后让AI进行「模拟考」，在实战中进一步学习。
在考试中，你是不是遇到过这样一些奇怪的考题，然后是这种状态：「啊，这种题型我没见过啊，这是什么鬼」？
AI也有类似的问题。自博弈训练后，得出的结果往往是单一的，对应在考试中，就是形成既定的解题思维。
最后，研究人员使用「基于 League 的多风格强化学习」这个方法进行补充训练，防止在赛场上见到一些奇怪的战术，会让AI一时间手足无措，自己先乱起来了。
这其实也是咱们普通人应付考试的时候，老师们经常会给出一些奇奇怪怪模拟试卷的原因。
研究者认为：基于 League 的多风格强化学习和基于 GAIL 的风格学习方法，是保证 WeKick 最终获胜的两大关键秘籍。
总而言之，这个来自中国的AI足球队，夺得了世界挑战赛的冠军，这一消息让关注中国足球的各路网友沸腾了。真人不行AI来凑，对此，国足表示，已退出直播间。
参考资料：
https://www.kaggle.com/c/google-football
https://ai.googleblog.com/2019/06/introducing-google-research-football.html
https://github.com/google-research/football
https://www.youtube.com/watch?v=F8DcgFDT9sc&feature=emb_logo
https://mp.weixin.qq.com/s/D2uu6vaaPfQSDeLEGlaoCw
来源：狂丸科学
编辑：Kun