現在JavaScriptの設定が無効になっています。このページを利用するにはJavaScriptの設定を有効にしてください。トップ全記事一覧テクノロジー2014.06.18今年もビックデータをテーマにしたサマーインターンシップやります学生のみなさん。データソリューション本部では、データの声を聞きユーザーの課題を解決していく仲間を募集しています。2013年に引き続き、今年もサマーインターンシップ2014を実施します。ご応募お待ちしております。https://about.yahoo.co.jp/hr/internship/bigdata/mbd01/さて、今回の投稿では、昨年度のインターンシップの中の発表内容の一部を紹介してみようと思います。応募の参考になれば幸いです。知恵袋で「調べてから質問しろ」という回答が見られるが、それが事実なのか疑問に思った。本当に自分で調べずに人に聞いて解決しようとする人が多いのか、単なる流行語として使われているのか明らかにしたい。質問が行われるまでのユーザーの行動を、ログから観察することで知恵袋検索に新しい価値が提案できるかもしれない。知恵袋に質問に投稿する前のユーザーの検索ログを調べることで、事前に調べてから質問を行ったかを判定する。全体で4割のユーザーが検索をせずに質問している。「おしゃべり、雑談」カテゴリーは、Q&Aではない雑談などの目的に利用して頂けていることがわかる。検索クエリで表現しにくい複雑な内容がすぐに質問されやすいことがわかる。この結果を受けて、検索クエリをより自然文に近い形で利用できるようにすれば、より多くのユーザの課題解決ができるかもしれないと考えました。公式の分析結果ではありません。精度はインターンシップの期間内でマッチングの結果のためログの解析期間や形態素解析の手法の見直しにより精度向上の余地があります。→「検証」のサイクルを回し続けることです。昨年度のインターンシップでは、このプロセスを学生さんと社員が協力して回すことができとても良かったと私は感じました。数千台のHadoopで仮説を検証するためのプログラムの実装を行う。