2017年3月31日お手本から学ぶことなく、コンピュータが自ら試行錯誤することで学習する「強化学習」。ポナンザにこの技術を導入した結果、まるで「ポナンザ流」ともいうべき独自の流派をつくり出したかのように強くなったと山本一成さんは振り返ります。続きを読む強化学習を繰り返した結果、私が予想もしてなかったことが起こりました。ポナンザは単に強くなっただけでなく、どんどん新戦法を指すようになったのです。人間同士の戦いではあり得ないとされていた手順が、次々と湧き出てきました。コンピュータ将棋の世界に入って本当によかった、と思った瞬間でした。私は将棋のことを甘く見ていたのです。私自身がプレイヤーとして将棋を指していたころは、既存の戦法にある種の行き詰まりを感じていました。有効な戦法の種類は限られ、その後の展開も研究しつくされたように見えていたのです。私だけでなく、多くの人が同じ心象を持っていたように思います。ポナンザは、それらの先入観から解き放たれて自由に将棋の海を潜っていきます。その海は、私が思っていたよりずっとずっと深かったのです。ポナンザが指し始めた戦法は多岐に及びます。それらはおもしろいことに私ではなく、アマチュアプレイヤーやコンピュータ将棋に敏感な若手プロ棋士によって「ポナンザ流」と呼ばれるようになり、体系化されていきました。ポナンザ流で有名なものでは、「左美濃急戦」と呼ばれるものがあります。この発見によって、プロ棋士の十八番であった「矢倉」が一時期急速に指されなくなったと言われるほど、大きな影響を与えました。赤線で囲った部分が左美濃と呼ばれる部分。2013年の名人戦で森内俊之名人(当時)によって打たれた△3七銀は、すでにポナンザによって発見されていた手ということで、大きな話題となりました。トッププロ同士の対局の趨勢を決めた一手でした。今ではポナンザ以外の将棋プログラムも、プロ棋士の棋譜からの学習を脱却して、強化学習を始めています。ここ数年でプロ棋士によるコンピュータ将棋の研究も進み、現在使われる戦法は、何かしらコンピュータの影響を受けたものがほとんどになりました。いつのまにか、コンピュータとプロ棋士の「どちらが教師か」という立場が逆転しているのです。忘れてはいけないのは、将棋で強化学習が可能になったのは、すでに強化学習前のプログラムがある程度強かったからだ、ということです。知識がない状態からの強化学習も可能かもしれませんが、その場合はある程度強くなるのに途方もない時間がかかるでしょう。プロ棋士の棋譜を元にすることが、機械学習を現実的なレベルで可能にしたのです。人工知能の開発においては、必ず大量のデータが必要になるのです。そのうえで、最初は「教師あり学習」。その後は「強化学習」に移るはずです。この流れは今後人工知能が普及するなか、さまざまな場面で出てくると思います。覚えておいてください。人類の反撃と許容この続きは有料会員登録をすると読むことができます。cakes会員の方はここからログイン1週間無料のお試し購読するcakesは定額読み放題のコンテンツ配信サイトです。簡単なお手続きで、サイト内のすべての記事を読むことができます。cakesには他にも以下のような記事があります。幡野広志の、なんで僕に聞くんだろう。falseこの連載について初回を読む人工知能はどのようにして「名人」を超えるのか?山本一成2016年、電王戦で5戦全勝した将棋AIポナンザ。開発者である山本一成さんは「知能とは何か?」「知性とは何か?」ということを何度も自問することになったそうです。することで、逆に人間の知能がクリアに見えてきたと言います。...幡野広志の、なんで僕に聞くんだろう。使えない高学歴は無意味。いっせい)プロ棋士に初めて勝利した現在最強の将棋プログラム「Ponanza」作者。HEROZ(株)リードエンジニア。