bindingsをインストール。https://mecab.googlecode.com/files/mecab-python-0.996.tar.gzこれでPythonからMeCabを使える。分かち書きをやってみる。'私はその人を常に先生と呼んでいた。名詞だけ取り出してみる。'私はその人を常に先生と呼んでいた。AMI)にPythonの機械学習系ライブラリを入れた。numpyscipysklearnインスタンスタイプはt2.microを選択したが、scipyのビルド中にエラーが出た。メモリが不足していたようで、swapファイルを作成すると正常にインストールできた。やったことパッケージのアップデート、スワップファイルの作成、ビルドに必要なツールのインストール、機械学習系ライブラリのインストール。実行コマンドは以下のとおり。Image)を選べるAMIはマシンのテンプレート。Linux、windowsなどのOSと追加のソフトウェアをパッケージしたもの。普通にsshでログインできる~/.ssh/configを書いておくと便利。Managementユーザの認証と各機能へのアクセス承認を管理するための機能やったことグループの作成ユーザの作成ユーザをグループに登録ポイント一つのAWSアカウントを複数ユーザで共有できるAWSを契約したときに作成したユーザはルートユーザ、IAMで作成したユーザをIAMユーザと呼ぶ。通常の用途ではIAMユーザを使う。ポリシー(アクセス許可)はグループ単位で設定する。AWS2015年12月16日水曜日AWS勉強記(1)サインインAWSの勉強を始めたので、やったことを書き溜めていきます。無料お試しでユーザー登録。AWSマネジメントコンソールにログイン。リージョン(画面の右上から選択)を「東京」に変更。AWS2015年12月13日日曜日ウィルコクソンの順位和検定2群のデータの差を検定するノンパラメトリック手法。以下のような場面で使う。例題1東京と大阪の住人を無作為に8人ずつ選んで、内閣支持に関するアンケートを行った。支持する、4:やや支持する、3:どちらとも言えない、2:やや支持しない、1:支持しない以下の結果から、東京と大阪で内閣に対する意見は異なっているか検定せよ。1データがリッカート尺度で与えられるため、ウィルコクソンの順位和検定を用いる。帰無仮説は棄却できない。よって東京・大阪で有意な差があるとは言えない。例題2ある新薬の効果を試すために被験者8名を集めた。8名のγ-GTP値を計測し、その後2ヶ月新薬を服用してもらい、2ヶ月後γ-GTP値を再計測した。結果は以下のとおりである。新薬に効果があるかどうかを検定せよ。195まず検定対象の分布に正規性があるかどうか確認する。0.03766すると有意水準5%で投薬前のデータは正規性を持たないことが分かる。正規性が仮定できないため、パラメトリック手法であるt検定は使うことができない。よって、ノンパラメトリック手法であるウィルコクソンの順位和検定で検定する。今回は同じ被験者の投薬前と投薬後の比較をするため、pairedオプションをTrue(群間の対応あり)にする。0上記の結果から、有意水準5%で新薬に効果ありと言える。標本サイズが小さい場合(期待度数が5未満のマスが20%以上ある場合)は、ピアソンのカイ二乗検定の検定結果は不正確になる(p値が低く計算されてしまう)ことが知られている。そのような場合は、フィッシャーの正確確率検定を使う。例題1高校生の携帯電話所持状況についてアンケートを行った。以下のアンケート結果から、男女で携帯の所有状況に差があるかどうかを検定せよ。帰無仮説は棄却されない。よって、男女で有意な差があるとは言えない。因みに同じ問題をカイ二乗検定で検定すると、以下のように有意差ありと判定されてしまう。Rは以下のように「カイ自乗近似は不正確かもしれません」と警告を出してくれるので親切。問題2血液型ごとにお酒が好きか嫌いかのアンケートを行った。以下のアンケート結果から、血液型によってお酒の好き嫌いに差があるかどうか検定せよ。帰無仮説は棄却されない。よって血液型に有意な差があるとは言えない。統計学ピアソンのカイ二乗検定ピアソンのカイ二乗検定をRでやってみた。例題1あるWebサイトのPV数を曜日ごとにまとめると以下のようになった。曜日によってPV数に差があるかどうかを検定せよ。「曜日ごとの差はない」という帰無仮説は棄却され、このサイトのPV数は曜日によって差があると言える。例題2あるWebサイトにはPC用ページとスマホ用ページが存在する。それぞれのページにおいて、CV数、非CV数をまとめると下表のようになった。PC用ページとスマホ用ページでCVに影響があるかどうか検定せよ。0.0490となり、一見すると有意な差がありそうに見える。この差が統計的に意味のあるものなのかどうかをピアソンのカイ二乗検定で検定してみる。0.05(有意水準)となるため、帰無仮説は棄却されない。よって、PC用ページ、スマホ用ページで有意な差があるとは言えない。以下の3つの平均について概要とどのような場面で使うのかをまとめた。用途に応じて"平均"を使いわける必要があると再認識した。一般的に使われる平均。値の和を観測値の個数で割った値。あるバスケットボールチームのメンバーの身長は188cm、187cm、168cm、184cm、197cmであった。メンバーの平均身長を求めよ。