Microblogs"概要Twitterとかでの単語の正規化用の辞書を作る話。文脈類似度の似た、辞書にない単語(OOV)と辞書にある単語(IVのペア)を集める集めたペアを文字列的な類似度でリランキング一定の長さと頻度以上の単語のみを対象とする。文脈類似度ある単語が出てきた時に周りに出てくる単語。これが似ている単語は意味が似ていると考えられる。文脈に登場した単語としてみなすかどうか品詞や構文的な情報は使っていない。Turkで作った正解データと一致したら、その頻度分スコアが増加。bigram、ポジションインデックスあり、All、KLダイバージェンスのとき最も良い結果。subsequenceカーネルとか。subsequenceカーネルと、音声的な編集距離がよかった。最終的に実際に文章の正規化に用いて評価。既存の手作業によって作られた辞書と組み合わせると大きなF値の向上が見られた。Adsenseを使っています。(1)月別アーカイブはてなブログをはじめよう!sucroseさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。