進攻手段豐富、擅長快速防守反擊，還能迅速找出“漏洞”，打對手一個措手不及……一場頂尖AI足球賽的激烈程度，不僅堪比真人專業足球競賽，更是一場AI領域的“硬科技”較量。
近期，游戲領域頂級會議IEEE游戲大會 (CoG)足球AI競賽公布最終結果，網易互娛AI LAB足球隊不僅包攬5v5和11v11雙賽道冠軍，更在11v11賽道中，以高出267分的優勢取得斷崖式領先，戰勝了包括清華大學、字節跳動、BiliBili、中國科學院自動化研究所、南京大學、中國科技大學等多支人工智能研究領域的頂尖高校及企業隊伍。據悉，這是網易互娛AI Lab繼去年滿分奪冠IEEE游戲大會的格斗游戲AI競賽后，再次獲該大會游戲AI類競賽的冠軍，展現出其在游戲AI方面的技術硬實力。
拿下頂級AI足球賽雙料冠軍，領先第二名267分
2022 IEEE游戲大會由IEEE主辦，中國科學院自動化研究所承辦，是該會議首次在中國舉行。作為游戲領域人工智能的國際頂會，IEEE 游戲大會每年舉行不同的競賽，吸引全球游戲領域學術界和工業界的研究與開發人員參賽，以同臺競技、互相切磋的方式，探討游戲AI技術的最新進展與未來發展方向。
長期以來，教AI學會踢球、踢出好球，是全球頂尖AI團隊一直攻堅的科研難題。足球比賽，以其策略的復雜性、多樣性和高難度著稱。AI球員不僅要掌握傳球、防守等復雜概念，還要能在場上根據對手的反應靈活應變，突破防守，拿下分數。
本屆IEEE 游戲大會舉辦的足球 AI 競賽，由5v5和 11v11兩個賽道組成。其中，5v5 賽道需要訓練除了守門員之外的4 名隊員的模型，而 11v11 賽道則需要訓練包含守門員在內的全部 11 名隊員。由于兩個賽道均屬于多智能體訓練任務，訓練AI球員的難度大幅增加，同時也增加了比賽的技術含金量。
比賽最終結果顯示， 網易互娛AI Lab以1292.28分和1491.48分的成績分別包攬了5v5和11v11兩個賽道的冠軍，特別是在11v11賽道中，以高于第二名清華大學267分的優勢取得了斷崖式領先。
（圖：網易互娛AI LAB獲IEEE游戲大會足球AI競賽雙料冠軍）
獨創自研AI訓練框架造就“雙料冠軍”，已應用于多款游戲
本次比賽中，網易互娛AI Lab采用了獨創的自研AI訓練框架。該框架基于強化學習和多樣性模型池，具有高強度、泛化性強和策略豐富的特點。相較其他模型，該AI框架訓練出來的AI球員，不僅能夠持續穩定提升自身“技能”，還可以避免強化學習領域經典的“非傳遞性”問題。這意味著，AI球員身上的弱點，更難被對手發現。
（圖：11v11比賽畫面）
此外，該模型的策略豐富度，也顯著超出此前其他已知的所有模型。例如，模型表現出豐富的進攻方式，除了經典的全隊進攻、邊路進攻、中路進攻和快速防守反擊外，還掌握了利用游戲引擎的特點形成的特定進攻戰術，因此能夠擊敗各類具有不同策略的對手。
（圖：訓練框架）
目前，網易互娛AI LAB的這套自研AI訓練框架，已實際服務多款游戲，應用于冷啟動匹配、補位、陪玩等多元場景，大幅提升玩家體驗。例如，當玩家匹配到AI對戰時，可以根據玩家不同的段位，派出不同難度的AI，讓玩家擁有與真人對打的暢快體驗。此外，AI訓練框架還將訓練難度更強、更具挑戰性的游戲AI，為進一步探索通用型人工智能奠定基礎。
未來，網易互娛AI Lab將繼續深耕游戲AI研究領域，不斷突破AI落地難題，為全球用戶創造全新的互動娛樂體驗。
