グラレコTweet『フリマアプリ「フリル」を支えるElasticsearchを用いた全文検索』に参加したのでそのメモを記しておく。70-80名くらい*電車の関係で少し遅れて20:00頃に到着したので情報の漏れがあると思いますがそこらへんはご了承願います。)を作っているので、その情報収集をしているときに見つけたと思う。参加した理由は検索が好きだから。冒頭にも書いたとおり、私は途中から参加したので最初の30分(19:30-20:00)は聞けていない。聞けたところだけメモしておく。プライマリシャードとレプリカシャード障害が起きたときも可用性が保たれる...とかそんな話だったと思う。マスターノードに関してもしゃべられていたと思う。ここらへんの話は最後のほうしか聞けていないのでもうちょっとはやく参加していれば......。yano3さんのこの資料に近い話をされてたと思う(たぶん)。GitHubAnalysis前処理をして、トークン分割して、後処理をして...のAnalyzerの話。shibayuさんのこのブログに近い話をされてた。適合率と再現率の2つがあって関係はトレードオフだよね。どちらをとるのかもサービスによるよね、みたいな話。wikipediaを参考文献に挙げられていたのでたぶんこのページだと思う。WikipediaTokenizerNgram(N文字単位で文章を分割)とanalysis-kuromoji(日本語形態素解析)の2種類があるよねの話。Kidoさんのこのブログに近い話をされてた。medium.com辞書をつくるフリマアプリだとどうしてもブランド名や商品名など固有名詞が多い。それらの固有名詞は辞書をつくって管理して検索精度を高めているという話。フリルは月1にまとめて泥臭く手作業で追加しているらしい。効率よく辞書を作成するために自社で辞書の管理画面などを作成していた。フリルの方が辞書に関してスライドを挙げられていたのでまさにこの話だった。Deck検索クエリの改善1つはクエリに対してスコアリングをしていて、フィールドによって重みを調整している。1つはmin_scoreオプションに0.3を設定して関連度の低い商品を足切りしている。(ここらへんもっと知りたい)そして、それらを行ったあとA/Bテストを実施している。)という指標を6%あげることができたことがあるそう。この方のブログと近い話なのかな...?qiita.comIndexの更新フリルの検索のIndexの更新はほぼリアルタイム!らしい。リアルタイムだとお客さんの要望(例えば、その時に商品が売り切れているかを確認...)には応えられるけどその分実装が複雑になる。Indexは商品モデルの更新をトリガーに非同期で更新している。同期的ではないかというと、オーバーヘッドコストが高いから。フリルはRailsで実装されてるからこの方のブログの話が近いのかな?ここらへん詳しくないので今度調べてみようかな。フリルの堀井さんに質問タイムすごいなと思ったのが最初から最後まで質問を上げる手がずっと途切れなくて15個くらい質問続いてた...。会場の雰囲気としては永遠に質問が途切れない空気でElasticsearchに関してこんなに疑問や質問を抱いている方がたくさんいるんだなあ、と改めて思った。(私も最後に質問させていただいただきました。ありがとうございます。)特に面白いなと思った質問2つをメモしておく。Elasticsearchのバージョンアップの頻度はどれくらいであげていますか?「バージョンをあげるタイミングは難しい。今は2系で運用している。来年5系に上げるかもしれない。」どれくらいの頻度であげているのかはわからなかったけども。バージョンアップするの難しいのかなあ。私はバージョンアップ作業を実運用とかでやったことがないのでどこらへんが難しいのかな...と気になった。いろんな方のブログを見ていると2系使っている人が多い印象を受けるけどバージョンアップ問題これからでてくるのかな。www.elastic.coマスターノードが死んだことはありますか?「マスターノードの障害もありました。頻度は高くないですが。クラスタ構成で救われました。」クラスタ構成については勉強会の冒頭で話されていたよう(たぶん)なので、聞きたかった。クラスタ構成よくわかっていない。勉強会のとなりの部屋で立ちながらお話する形式だった。お酒はサポーターズさんが用意してくれてた。一定時間がたったらシャッフルタイム?で席替えじゃないけど、いろんな方と話せるようになってたのがへ〜と思った。(60)月別アーカイブはてなブログをはじめよう!sakura818uuuさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。