オープンソースベンチマーク「LEEROY」が登場、AIエージェントがチームを組んで『WoW』のダンジョンを攻略

開発者がAIエージェントの評価ベンチマーク「LEEROY」をオープンソースとして公開した。LLMベースのエージェントが『World of Warcraft（WoW）』でチームを組んでダンジョン攻略に挑むことで、長期計画力と協調能力を評価する。モデルの1推論あたりのレイテンシが長いため、エージェントはLuaスクリプトを生成してヘッドレスクライアント上でリアルタイムに実行させ、ネットワークプロトコルからパースした構造化データをもとに意思決定を行う。実証テストでは、事前の協調指示を与えられていない5つのエージェントが自発的にパーティを組み、スキルを連携させながら17時間41分で「デッドマイン」をクリアした。コードはGitHubで公開されている。