N1/2/4/5がそれぞれ旧1/2/3/4級に相当し、旧2級と3級の間にN3を新設したとのこと。新制度では語彙数の目安が出されていないが、N3以外はおおむね上記が目安になると考えてよいのだろう。「日本語単語スピードマスター」という単語集シリーズがある。下から累積をとっていくと、ほぼ上の数字に近い。このことからも、大体合ってると考えてよさそうだ。大きな書店に行けば、試験用問題集が置いてある。その問題を見てみると、N5はやはり一見して漢字が少なく、文型も限られたものしか使っていなくて、小学校低学年向けのような印象を受ける。N4になるとだいぶ漢字が増え、一見するとかなりまともに見える。見るとやはり使用する表現が限られているのがわかる感じ。N3になると、ふりがなが振られている点を除けばほぼまっとうな文章に見える。次に、単語の「カバー率」を考えてみる。カバー率とは、日本語の文章(コーパス)をとってきて、上位N語の出現頻度を指すとする。81.7%原典はあたってないので意味する正確なところはわからない(単語なのか、形態素なのか。機能語を含むのか、等)。ウェブ記事を鵜呑みにするのは心配なので、少し実データでも検証したい。2010」で検証してみる。晋氏がウェブ(1億ページ!)から収集したコーパス。生テキストは69GBありなかなか扱いづらいが、形態素Ngramもついている。ここでは単純に、形態素1gramを見てみる。http://dist.s-yata.jp/corpus/nwc2010/ngrams/word/over9/1gms/1gm-0000.xzXZutilsというあまり一般的でない(?)圧縮ツールを使っているのでご注意。ツールのリンクもついていてダウンロードできる。1882399603:ここから記号の行を除き、先頭N行の回数の和を数えればカバー率が計算できる。100.0注:・除いた記号行は全部ではなく、先頭いくつかを手で除いただけである。・「単語」でなく「形態素」なので、動詞や形容詞の活用形はそれぞれひとつとカウントされる。・形態素解析はmecab+ipadicを使っているとのこと。mecabの解析は、かなり精度はいいもののやはり時々間違いがある。定量的な数字を持っていないが、分ち書きに関しては誤り2-3%といったところだろうか?その程度は誤差を含むと思ってほしい。係り受けの次のステップ月別アーカイブはてなブログをはじめよう!yu_hatvaさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。