IT、ガジェットネタまとめ速報

IT技術やガジェットネタに関するみんなの反応のまとめをチョイスしてお届け!

Web系関連記事: プログラミング、開発関連

世界最強の囲碁AIを開発したDeepMindが「人間を超越したFPSプレイヤー」のAIを開発

投稿日:

1: 田杉山脈 ★ 2018/07/06(金) 23:56:54.85 _USER
no title

Googleと同じAlphabetを母体に持ち、世界最強の囲碁AI「AlphaGo Zero」を開発した人工知能(AI)開発企業・DeepMindが、ファーストパーソン・シューティング・ゲーム(FPS)で人間を超えた勝率をたたき出すAI「For the Win(FTW)」を開発しました。ただ敵を倒すだけではなく、人間のチームメイトとも協力して有利にゲームをプレイすることができるとのことです。

Capture the Flag: the emergence of complex cooperative agents | DeepMind
https://deepmind.com/blog/capture-the-flag/

人間とゲームをプレイするAIの研究は、2017年にもOpenAI開発のAIが「Dota 2」で人間に勝利するという結果を残し、話題になりました。また、DeepMindも「StarCraft 2」をプレイするAIを研究していたことがあります。

今回、GoogleのDeepMindが開発した「FTW」は、1999年に発売された「Quake III Arena」をプレイ。「Quake III Arena」はマルチプレイヤー向けのFPSで、今でも大会が開かれるほど人気があるタイトルです。この「Quake III Arena」での対戦ルール「Capture the Frag(CTF)」という旗取りゲームを行い、人間と一緒にチームで遊べることを目指して学習を行ったとのこと。

CTFは2つのチームに分かれて対戦するゲームで、相手チームの陣地にある旗を奪って自陣に戻るとポイントが加算されるというもの。単純なルールに見えますが、相手チームに旗を取られた場合は旗を持っているプレイヤーを倒さなければならないなど、状況に応じて狙う相手や動きを変更しなくてはならず、CTFで要求される動きは複雑だと研究チームは評価しています。

戦いの舞台となるマップは同じものを使い続けるのではなく、マッチごとにマップを変更していたとのこと。これによって、FTWはマップのレイアウトを記憶するのではなく、汎用的な戦略を学習していかなければなりません。さらに、AIを人間と同じように成長させるため、従来のゲーム用AIのようにゲーム内でのパラメータを直接読み取ってプレイするのではなく、人間と同じように画面上のピクセルを認識させてエミュレートしたコントローラーで操作をさせています。

DeepMindの研究チームは、40人の人間プレイヤーと30のFTWのエージェントをランダムにマッチさせ、45万回以上CTFをプレイさせました。各エージェント間ではリカレント(回帰型)ニューラルネットワークが形成され、さらにゲームポイントから内発的動機付けを行うように学びます。これによってCTFを高いレベルでプレイするようになります。

以下のムービーで、実際にFTWのエージェントが人間も交えながらCTFをプレイする様子が見られます。
https://www.youtube.com/watch?v=dltN4MxV1RI



以下のグラフはFTWの成長具合を表したもの。横軸がゲーム回数、縦軸はEloレートと呼ばれるプレイヤーの強さを示す数字で、高いほど強いプレイヤーであることを示します。水色線がFTWのEloレートを示していますが、FTWのエージェントがCTFを15万回プレイした段階で既に「平均的な人間プレイヤーのEloレート(Average Humanと書かれた点線)」を超えていて、20万回へ到達しないうちに「強い人間プレイヤーのEloレート(Strong Humanと書かれた点線)」を超えています。CTFを45万回プレイする頃にはトップスコアを記録しています。
no title

以下ソース
2018年07月06日 11時23分
https://gigazine.net/news/20180706-deepmind-capture-the-flag/
引用元: http://egg.5ch.net/test/read.cgi/bizplus/1530889014/


続きを読む


【期間限定】失敗しないためのカリビアンコム3日間無料キャンペーン情報まとめ

このまとめの続きはコチラ!

-Web系関連記事: プログラミング、開発関連

関連記事

そろそろCOBOL絶滅のシナリオを考えようか

1: 田杉山脈 ★ 2019/04/01(月) 15:12:35.62 _USER
いやぁ、調査結果を読んで腰が抜けそうになった。何の話かと言うと、日経 xTECHが実施した「COBOLに関する実態調査」の件だ。社内にCOBOLを使ったシステムがあると答えた人が、なんと回答者全体の61.6%を占めたのだ。 …

善意育む「弱いロボ」 ごみ拾えずウロウロ→子供が手伝い 教育現場で実用化へ

1: ガーディス ★ 2018/06/04(月) 19:55:10.80 _USER9
ごみを拾えないごみ箱ロボット、もじもじしてうまくティッシュを配れないロボット--。豊橋技術科学大(愛知県豊橋市)が一見頼りない「弱いロボット」の開発を進めている。「不完全さを残すことで、人の優しさや手助…

World IPv6 Launchから6年、依然としてIPv4が優勢

1: ノチラ ★ 2018/06/10(日) 20:51:58.67 _USER
インターネット標準の普及促進などの活動を行っている非営利の国際組織Internet Society(ISOC)は、IPv6の普及を目指すイベント「World IPv6 Launch」から丸6年となる2018年6月6日、世界のIPv6導入状況についてまとめたレ…

高校の数学に「行列」復活も、国が本腰入れるAI人材教育の詳細が判明

1: 田杉山脈 ★ 2019/05/20(月) 22:11:33.75 _USER
内閣官房の教育再生実行会議(座長・鎌田薫前早稲田大学総長)は2019年5月17日、人工知能(AI)やIoT(インターネット・オブ・シングズ)などを技術の進展に合わせて様々な分野で使いこなせる人材の育成策を盛り込んだ第1…

VBAでシコシコ自動化しているやつ、Pythonを覚えろ! Pythonで「脱VBA」する方法

1: エアロモナス(宮城県) [US] 2020/02/09(日) 12:28:46.70 ● BE:601381941-PLT(13121)
Pythonで「脱VBA」、Excelの行番号を記述せずにセルを指定する方法 Excelデータをプログラムで扱うのなら、プログラミング言語はVBA(Visual Basic for Applications)が定番です…