国彦(45)74この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。今日はブログもくもく会です。休憩室でみんなでもくもくブログを書いています。オープンソースの形態素解析エンジンです。形態素解析と聞くと、全文検索を思い浮かべる人が多いかと思いますが、それ以外の用途でも活躍の場が多くあります。(機械学習テクノロジーを簡単に使用できるようになるサービス、以下AML)では、既存データのパターンからモデルを作成し、そのモデルを使用して新しいデータを処理し予測結果を得ることができるのですが、この既存データ、新しいデータに何も処理されていない日本語の文章が含まれている場合は、その予測精度も下がってしまいます。指定した場合、そのフィールドの内容はスペースで区切られた単位をひとつの単語として解釈し、それらの単語の出現数などから対照フィールドの相関関係を計算する仕組みになっているのですが、日本語はそもそも分かち書きしない言語(単語をスペースで区切らない)だからです。使えると、サーバーレスで形態素解析処理を含んだデータ変換処理を実装できるのでないかと思いましたので、その実装方法を説明します。言語バインディングを使用します。実行環境と同等の環境を構築してそのOS上で、パッケージを作成してください。