「読めてしまう」コピペがなぜ読めてしまうのかhttp://www.asks.jp/users/hiro/59059.htmlhttp://www.itmedia.co.jp/news/articles/0905/08/news021.html最初読んだとき、違和感なく読めてしまったのですが、よくよく見てみると、そんなトリックがあったのですね。この「読めてしまう」がなぜよめてしまうのでしょうか?人間の言語モデルの単語パープレキシティは、約100ぐらいであると言われています。確率で正解するということです。件のコピペですが、最初の文字は変わらないので、その正解率は平仮名の数(52)倍になります。単語の長さが変わらないというもの、大きなヒントになって、平均正解率は1.0に近くなるのではないかと思います。ちなみに、統計的言語モデルのパープレキシティは50~150ぐらいで、条件やデータによって変わります。あのコピペのような文章を作っても、非常に高い精度で元の文章が機械的に復元できると思います。18:28トラックバックこのエントリーのトラックバックURL:http://chasen.org/~taku/blog/mt-tb.cgi/246。