訳語として用いられています。外れ値とは、実験や調査で観測された値の中で、真の値の推定値*1からの残差*2が異常に大きい観測値のことです。同じ本の中で、外れ値と異常値を使い分けていることがありますが、この場合、外れ値の中でも外れ値となった理由があるものを異常値としています。子供の平熱を調べていたら風邪で熱を出している子が紛れ込んでしまったような場合です。2倍から3倍以上あるときとすることが多いですね。0.3%程度の出現率ということになります。エクセル統計では外れ値検定に含まれる「スミルノフ・グラブス検定」という手法を使って外れ値を検出できます。スミルノフ・グラブス検定では平均値から最も離れた観測値を選び、その残差をσで割った値を検定統計量とします。外れ値が見つかったら、これを除外して検定をやり直すということを続けていくと、外れ値の無いデータセットを作ることができます。スミルノフ・グラブス検定は正規分布を前提とした方法なので、正規分布からかけ離れた分布のデータに利用すると、観測値の殆どが外れ値になってしまうこともあるので注意してください。10%をカットして外れ値の混入を防ぐという方法もあります。この両端をカットして求めた平均値をトリム平均とか○○%調整平均と言います。トリム平均はExcelのTRIMMEAN関数を使って求めることができます。以上の2つは機械的に外れ値を除くテクニックですが、外れ値を見つける最もポピュラーな方法としては、ヒストグラムによる判断があります。ヒストグラムの利点はデータの分布も同時に確認できることです。分布の中心が平均値よりも左側に偏り右裾の長い分布なら、外れ値を除外せず、すべてのデータを対数変換してみましょう。対数変換後のデータが正規分布になり外れ値も無いようであれば、対数変換したデータを使って推定や検定を行うことで分析の精度が上がります。でないかチェックしておきましょう。計測の失敗や風邪による高熱など異常値であることが明らかなら、除外することに問題はありません。ノンパラメトリックな方法を利用するということも考えましょう。外れ値を見つける方法としてスミルノフ・グラブス検定があると前回書き...続きを読む決定係数の計算方法2017/11/06決定係数の計算方法を紹介します。Corporationの米国およびその他の国における登録商標または商標です。