人工知能は「記憶」を手に入れた。20:00人工知能は「記憶」を手に入れた。複数のゲームを連続でプレイできるようになった!従来のニューラルネットワークは、新しいことを学習するたびに記憶が上書きされ、それまで学習した情報を失うという欠点があった。DeepMindはこの欠点を克服し、複数のゲームを連続でプレイできるシステムを開発した。DEEPMINDグーグル傘下のDeepMind(ディープマインド)による機械学習システムが、ヴィデオゲーム「アタリ」をプレイする方法を学習して一躍脚光を浴びたのは、2014年のことだった。このシステムはゲームに勝ち、人間より高いスコアを獲得することに成功した[日本語版記事]。実は、システムは学んだことを記憶していたわけではなかった。関連記事:ディープマインドはいかにして生まれたか?当時のシステムでは、違うゲームを始めるたびに新しいニューラルネットワークをつくらなければならなかった。同一のシステムが、たとえば「スペースインヴェーダー」と「ブロック崩し」を続けてプレイすることはできなかったのだ。このほど、ニューラルネットワークが自分の学習した情報を記憶し、再利用できるようにするアルゴリズムを、ディープマインドとインペリアル・カレッジ・ロンドンの研究者が開発した。「これまでのシステムは、ゲームをプレイする方法を学ぶことはできましたが、1つのゲームしか学習できませんでした」と、ディープマインドの研究者で、論文の筆頭著者であるジェイムズ・カークパトリックは説明する。learning)が可能になったという。ディープマインドは、ブログでもこの点について説明している。カークパトリックによると、ニューラルネットワークとAIが抱えている「大きな欠点」は、あるタスクで学習したことを次のタスクに引き継げないことだ。研究チームは論文のなかで、「複数のタスクを忘れることなく順番に学習できる能力は、生物学的な知能と人工知能の核となる要素だ」と述べている。Consolidation」(EWC)と呼ばれるアルゴリズムを開発した。カークパトリックの説明によれば、このアルゴリズムは、ゲームをうまくプレイするうえで学んだ内容から取捨選択し、最も役に立つ内容を保持するという。「われわれのアプローチでは、何を学習するかをタスクの重要性に基づいて選択し、学習するペースを落とすことによって古いタスクを記憶できるようにしている」と論文では説明されている。「われわれは、(学習するゲームを変更していくときに)AIが非常にゆっくりとしたペースで学べるようにしました」とカークパトリックは言う。Q-Network」(DQN)と呼ばれるディープニューラルネットワークだ。このDQNは、以前にアタリで勝利を収めたときにも使われていたが、今回はEWCアルゴリズムによって“強化”されていた。ディープマインドは、このアルゴリズムとニューラルネットワークのテストを、ランダムに選択した10パターンのアタリで行った。これらのゲームはすべて、このAIが人間と同じくらいうまくプレイできることがすでにわかっていたものだ。DQNが1つのゲームを2,000万回プレイしたら、自動的に次のゲームに移るようにした。「以前なら、DQNはゲームごとにプレイする方法を学ばなければならなかった」と論文には書かれている。「それに対し、EWCで強化されたDQNエージェントは、記憶を保持したまま多くのゲームを学習することができた」さまざまなゲームにおけるスコアの変化。赤い線はEWCを使った場合。黒い線は、それぞれのゲームを単独で学習した場合。PNASただし、決してこのシステムが完全というわけではない。たしかに、システムは過去の経験から学習し、最も役に立つ情報を記憶できるようになった。ニューラルネットワークがひとつのゲームのみをプレイしているときと同じくらいうまくプレイすることはできなかった。「現時点では、AIが追加学習できることは証明しましたが、その学習効率を高めることはできませんでした」とカークパトリックは言う。NewPROMOTIONあまねく人に社会復帰の機会を。そのために、わたしは農業を続ける。──小島希世子PROMOTION難民は「難しい民」なんかじゃない。みんなが“自分らしく”暮らせる社会をつくる。JINSが目指す未来のアイウエアPROMOTION七大陸最高峰を最年少制覇した南谷真鈴、「クルマで移動する自由」を体感する。PROMOTIONテクノロジーが拡張するスポーツとアートの可能性:東京2020は世界の若者の希望となるかPROMOTIONこれまでにない「新しい材料」を生み出す。それがよりよい社会をつくるから。群雄割拠のゲームビジネスの世界へようこそ:但木一真連載『ゲーム・ビジネス・バトルロイヤル』序章NATURE太陽系で最も“過小評価”されている水星、その岩だらけの姿:今週の宇宙ギャラリーCULTURE『キャッツ』そのものに“罪”はない。