グラフィックファシリテーター®やまざきゆにこです。NRI「データサイエンス用語」の解説動画(絵巻物)第5弾がYouTubeアップされました。今回は(2分で解説)「ベイズ統計」です。ビル・ゲイツさんが「マイクロソフトの競争優位にたっているのはベイズ・テクノロジーのおかげ」と言ったことから、昔からあった「ベイズ統計」が一躍「ビジネスに活用できる」と注目されているそう。(2分で解説)「ベイズ統計」NRIデータサイエンスラボhttps://www.youtube.com/watch?v=GVh7kUQYgRcベイズ統計のもとになっている「ベイズの定理」をビジネスに活用している事例としてよく紹介されるのが、迷惑メールフィルタリング、ということで動画もそれで解説することにしました。【動画を見る前に、さて問題です】メールの本文中に「無料」という表記があったら、あなたなら「それが迷惑メールかどうか」どう判断する?ちなみに「迷惑メールに識別されたメールの中で「無料」という表記が出現する割合:30%」「すべてのメールの中で「無料」という表記が出現する割合:10%」「全メールの中で、迷惑メールが占める割合は20%」と仮定する。わかりやすくするために、全体のメールの数を100通として計算してみてみると...?データシロウトのわたしなら安直に「迷惑メールフィルターに登録する単語に『無料』という言葉は入れないほうがいいんだろうな」なんて判断しちゃうところです。『ベイズの定理』の考え方で確率を出してみると...ベイズ統計の特長は2つ1「データの見方を変えて」要因を正しく評価する:動画の中では「ベン図」を使って説明しています。「ベン図」で見ると分かりやすい。迷惑メール側から見ると「迷惑メールのうち無料表記がある割合は30%」でも、同じデータでも見方を変えて、無料表記あり側から見ると「無料表記があるメールのうち迷惑メールである割合は60%」となる!あれ?!迷惑である可能性(確率)が高まった!(30%→60%「ベイズ更新!」とも言うそう)「迷惑メール」以外の例でよくあるのは「人間ドッグで陽性判定が出たからといって必ずしも病気じゃないよね」「無作為にPCR検査しても意味ないよね」みたいな話も、データを使って(こんなベン図で)説明されているわけです。2新しいデータの取り込みに対する「柔軟性」:サンプルデータが少なくても比較的正しい確率を出せるよ、サンプルデータが増えれば自分で修正してさらに精度を挙げていく。...とのことなのですが統計シロウトのわたしとしては「今の時代、サンプルデータが増えるたびに精度を上げていくのは、当たり前では?」と聞いたら「昔ながらの統計学では許されない。データが増えるたびにゼロから分析する必要がある」とのこと。機械学習のおかげで再注目:昔からあったベイズ統計学が、今の時代の機械学習にハマって再注目され始めたのだそう。「ベイズさん、まさか今こんなに注目されてるとは思わないだろうなー」と思わず、ベイズさんがいつの時代に生きていた方なのかわざわざ調べてしまいました。(動画にわざわざ書いてます)ただ、サンプルデータがある程度集まってしまえば、これまでの統計学でも出来ちゃうことだから、2だけがフォーカスされやすいけど2はそんなにスゴイことではないのだそう。ちなみに、「このメールは迷惑メールなのかどうか」を判断する材料も、現実問題は「無料」という単語だけでなく「キャンペーン」とか「プレゼント」とか「凍結」とか「振り込み」とか、、、どんどん複雑になるので、ベン図で理解するのは不可能。機械学習の力を借りながらベイズの定理の公式が生きてくるってワケですね。上の画像は動画の中では説明していなけれど、大事な用語なのでここに記載しておきます。「ベイズ統計学」は「因果推論」ほどホットではないそうですが、すでに「ベイズ」もネット上だけでもいろんな見方・意見が交わされていて、、、かなりの混乱状態?!ベイズ推計とかベイズ推論と呼んでいる人もいたり、2の部分だけをベイズの定理と言ったり、数式にわざわざしなくてもベン図で充分じゃないの、などなど、、、そこに一石を投じるのが今回のNRIさんの「ベイズ統計」解説になるのでは。「ベイズ統計」用語解説ページはこちら。https://www.nri.com/jp/knowledge/glossary/lst?syllable=taぜひチャンネル登録してください。「ディープラーニング」のディープって「深い」じゃないって知ってました?2分で分か...デザイン思考もアート思考も「思考」という文字が問題ダ。時系列データ活用できてる?時系列分析のラ...感覚的にデータ分析♪ベイジアンネットワー...もう嫌われない?!「コンテクストマッチ広...自然言語ここまで来た「GPT-3」スゴイ...回帰分析におけるp値とt値。幻冬舎plus連載OCEANS最近の投稿リモートワークか、オフィスワークか。