研究團(tuán)隊指出,目前的 AI 模型存在明顯的功能鴻溝,以游戲為取向的 AI 能正常游玩但無法理解自己所做的決策,而語言模型雖然可以推理策略,但很難真正執(zhí)行操作,為此他們研發(fā)了全新 TiG 框架,讓模型在游戲中同步思考、行動。
團(tuán)隊選擇以《王者榮耀》游戲作為訓(xùn)練范本,先使用匿名且標(biāo)準(zhǔn)化的賽事數(shù)據(jù)定義推上路、擊殺暴君、守家等 40 種宏觀行動,勝負(fù)回數(shù)均衡,AI 模型們必須要在每個定義好的場景下選擇最佳策略,并解釋其戰(zhàn)略緣由。
具體來說,訓(xùn)練分為兩個階段,首先是在監(jiān)督中學(xué)習(xí),弄清楚這些策略的基本機(jī)制;隨后通過獎勵機(jī)制進(jìn)行強(qiáng)化學(xué)習(xí),如果行動正確能得 1 分,錯誤行動則得 0 分。
隨后團(tuán)隊測試了多種語言模型,涵蓋 Qwen2.5(7B、14B、32B)、Qwen3-14B 模型,并使用 DeepSeek-R1 大模型作為對照組;先從 DeepSeek-R1 提煉高質(zhì)量訓(xùn)練數(shù)據(jù),然后使用群體相對策略優(yōu)化(GRPO)技術(shù),比較不同策略之間的優(yōu)劣。
最終經(jīng)過 TiG 框架訓(xùn)練的模型不僅能制定行動計劃,還能解釋原因,例如 AI 會指出某個防御塔防守薄弱,是理想的進(jìn)攻目標(biāo),但需要注意埋伏的敵人。模型訓(xùn)練后仍保持原有的文本理解、數(shù)學(xué)推理與問答能力。
最終測試結(jié)果如下:
體育播報10月6日宣 意甲第6輪比賽,尤文主場0-0戰(zhàn)平米蘭。根據(jù)德國轉(zhuǎn)會市場的數(shù)據(jù),尤文連續(xù)5場聯(lián)賽零封米蘭,戰(zhàn)...
2025-10-06體育播報10月6日宣 據(jù)法國媒體RMC報道,在本輪法甲聯(lián)賽之后,姆巴佩和巴黎圣日耳曼主帥恩里克以及老隊友們見面...
2025-10-06體育播報10月6日宣 那不勒斯2-1擊敗熱那亞,賽后,本場再次收獲進(jìn)球的那不勒斯前鋒霍伊倫接受媒體采訪?!拔矣X...
2025-10-06體育播報10月6日宣 巴黎在本輪法甲1-1遭到里爾絕平,巴黎舊將、姆巴佩的弟弟伊桑-姆巴佩打進(jìn)絕平進(jìn)球,恩里克在...
2025-10-06體育播報10月06日宣 意甲第6輪尤文vs米蘭,普利西奇飛點前,阿萊格里背對球場不敢看。...
2025-10-06