VISIONのコンテンツをアーカイブとして公開しているサイトです。国際情勢カルチャーメディアワークスタイルハッキングデザインブログニュースアーカイブ検索の鉄人が、サーチの周辺事情とユニークなウェブビジネスを読み解く。関裕司の「サーチ・リテラシー」はこちら)GoogleやYahoo!のようなサーチエンジンは、私たちがウェブで見ることのできる情報のうちどの程度をカバーしているだろうか。両者とも現在はインデックスサイズを公表していないが、おそらく数百億ページというオーダーになるだろう。これはウェブ全体の何割を占めているのだろうか。8割くらいだろうか、それとも5割もないのだろうか。実は1%もないんじゃないかと私は思っている。実際のところ、私たちが通常のサーチエンジンで到達できる部分は広大な情報の海の表面にしかすぎない。その海の表面は荒れている場所もあればウソに染まった部分もある。信頼のおける確かな情報はどこにあるのか。web)」と呼ばれる領域である。サーチエンジンはこのディープな部分を検索できないのか。理由は簡単で、サーチエンジンの情報収集エージェントであるクローラーは海に潜れないのだ。クローラーはリンクによってつながっているページであれば、どこにでも出かけていくことができる。ところが「リンクされていない情報」がウェブ上に大量にあることにみなさんは気づいているだろうか。ウェブで頻繁に使われるサービスに「辞書」がある。例文が豊富なので表現辞典としても使うことができる。私たちがこういった辞書を使うときの動作を思い出してみよう。リンクをクリックしながら言葉の意味を調べているだろうか。いや、そうではなくて、単語を「入力」してから検索ボタンをクリックしている。するとバックエンドで控えている辞書のデータベースに問い合わせを行い、得られた結果を整形してHTMLのページとして私たちに見せてくれる。人間にとっては何のことはないこの一連の動作を、サーチエンジンのクローラーは決してすることができないのだ。このようなデータベースと連動して表示される動的なページを提供しているサイトは多数ある。その多くは公的な機関の資料であったり、学術性、専門性の高いコンテンツであったりする。信頼性という点ではクローラーが巡回できる荒れて汚れた海の表面とはまったくレベルが違うのだ。本当の情報収集の能力というものは、このディープウェブというものを常に意識しているかどうかにかかっているのだ。個々人があらゆるディープウェブに精通することはできない。その道案内さえあればいいのだ。海外では例えば「CompletePlanet」は70,000以上のディープウェブなサイトのディレクトリーを構築している。ところが日本ではこれまでディープウェブという切り口で語られることがあまりなかったせいか、ここまで本格的なサイトは見たことがない。Googleのミッションは「世界中の情報を体系化し、アクセス可能で有益なものにすること」らしいが、さて、Googleに期待してよいものだろうか。いって大後悔プロジェクトとなるよりは、この地味ではあるが有用なディープウェブ対策をやっていただいた方がずっと世の中のためになると思うのだが、どうだろうか。フィードを登録するIT関裕司の「サーチ・リテラシー」プロフィール1963年生まれ。「検索の鉄人コンテスト」で優勝。サーファー部の部長としてヤフー検索の精度向上の業務を日米共同で行う。現在はフリーで活動中。