aboutモダン・シンタックス。BlogPeopleの中の人です。基本的に素直で優しくて合理的です。ネットから価値を引き出すあの技術、この技術」と題したワークショップが行なわれた。検索サービスに関する最近の動向や、実際のWeb検索サービスの構築から得られたノウハウなどが紹介された。収集したページは文章を単語レベルに分解し、単語をキーとした検索インデックスを作成する。この際に、単語がページのどこで出現したかを示す指標や、単語間の関連性などをインデックスに含めることで、検索時間の短縮や検索精度の向上が図れるが、インデックス化に時間がかかるとそれだけ検索結果に新しいページが反映されるのが遅くなる。この問題への対処法としては、クローラーが収集したページをリアルタイムでインデックス化する方式を採用し、通常の検索処理を継続したままデータの追加・更新を可能にするサービスの実現を目指したという。検索用のサーバがクラスタ構成のLinuxサーバ350台だそうです。ちなみにBlogPeopleの検索サーバは1台なんで、まったくお話にならないわけですが、1台の割にはよくがんばってますね。検索システムもクローリングとインデッキシングのところでいろいろ工夫していかに早くインデックスを更新し、かつ、検索スピードを落とさないようにするか、というのがチャレンジなのですが、その部分が落ち着いてくると今度は検索結果の品質、というのが問題になってきてアダルトとか広告なんかの記事をいかに排除していくかというのが重要になってくるわけですが、そういうのに日々まじめに対応していると自分の神経がどんどん暗黒面のフォースに犯されていくのがわかります。サスケ君が大蛇丸のとこに行ったのとか、アナキンがダースベータになった気持ちもわからなくないなあ。サイトリニューアルです。皆さんお待たせしました。世界のエロを学ぶために旅立っていて書き込みできずにうずうずしとりました。