使用して数千億ページをクロールすることで機能しています。これらのwebクローラーは、一般に検索エンジンボットまたはスパイダーと呼ばれます。検索エンジンは、webページをダウンロードし、これらのページのリンクをたどって、利用可能になった新しいページを発見することにより、検索エンジンを利用するユーザーに検索結果をナビゲートしています。検索エンジンの役割とは検索エンジンの検索結果ページ(SERP)では様々な情報が表示されます。その他の種類のファイルへのリンクが混在しています。人間の編集者のみが管理するwebディレクトリとは異なり、検索エンジンはwebクローラーでアルゴリズムを実行することで「リアルタイムの情報も管理」します。web検索エンジンで検索できないインターネットコンテンツは、「深層web」または「ディープweb」と呼ばれます。ほとんどの検索エンジンは、クローラーに基づいてインデックスを作成します。クローラーとは、Google、Yahooなどの検索エンジンがインデックス付けする新しいページを見つけるための「収集プログラム」です。クローラーによってweb上から収集されたデータがインデックス化され、巨大な検索データベースが作成されます。「巨大な検索データベース=検索エンジン」ということになります。Googleが持つクローラーには用途に応じて複数のクローラーが存在しています。通常のweb検索には「Googlebot」、画像検索には「Googlebot-Image」、モバイル検索には「Googlebot-Mobile」といったように、様々なクローラーが存在します。検索エンジンには3つの主要な機能がある検索エンジンには3つの主要な機能があります。1クロールインターネットでコンテンツを探し、見つけた各URLのコード/コンテンツを調べます。2インデックスクロールプロセス中に見つかったコンテンツを保存および整理します。結果として表示されるようになります。3ランキング検索ユーザーにとって最適なコンテンツを提供します。検索エンジンでの結果は最も関連性の高いものから最も低いものの順に並べられます。検索エンジンの情報収集はこのクロールから始まります。世界には数十億のwebサイトが存在すると言われており、この果てしない数のwebページをクローラーがwebサイト上のリンクを辿って情報を収集しています。このクローラーの訪問頻度は、Googleのプログラムによって決められますが、他の評価の高いサイトからリンク得ていることや、検索上位に位置しているwebサイトでは頻繁にクローラーが訪れる傾向にあります。クローラー対策には下記が有効になります。ページを頻繁に更新するリンク構造をきちんと作るGoogleサーチコンソールを使用するGoogleサーチコンソール内の「URL検査」という機能があります。この機能を使うと、ページがインデックスされているのか確認ができ、登録されていない場合はインデックス登録のリクエストが可能です。クローラーがwebサイトにいつ訪れるかについて具体的な日数というものはありません。作られたばかりのwebサイトはクローラーが見つけてくれるまでに時間がかかりますが、Googleサーチコンソールを使うことで、巡回を待つことなくクローラーに情報収集をしてもらうことができます。検索エンジンは、クローラーが集めた情報を処理してインデックスに保存します。インデックスは、クローラーが発見したすべてのコンテンツの巨大なデータベースであり、検索エンジンの情報源となります。Googleのデータベースにページがインデックスされているかどうかは、検索エンジンで、「site:確認したいサイトやページのURL」と検索することで確認することができます。Googleのランク評価基準Googleの検索エンジンは進化を遂げ、小手先のテクニックで検索エンジンを騙すような、いわゆる「ブラックハット」と呼ばれる手法が通用する時代ではありません。結局のところ、ランキング対策で最も重要なのは、「ユーザー中心のコンテンツ」です。ユーザーに本当に役に立つコンテンツ(情報や知識・ノウハウ、ニュース、娯楽等)を提供することが、Googleから高いランクの評価を得られるのです。SEO対策はすべての検索エンジンで効果がある?ほとんどの人は、Googleが検索エンジンの中では最大の市場シェアを誇っていることを知っていますが、世界には30を超える主要なweb検索エンジンがあります。SEO対策というと一般にはGoogleのみを意識した対策を行っている方が殆どです。Googleのみを意識したSEO対策になってしまうのかというと、大部分の人々が数ある検索エンジンの中で、主に利用するのはGoogleであるということです。Google画像、Googleマップ、YouTubeを含めると、web検索の90%以上がGoogleで行われています。日本ではGoogle以外にも「Yahoo!JAPAN」や「Bing」といった検索エンジンを使用している方も多いと思いますが、実はYahoo!JAPANの検索エンジンの中身はGoogleになります。Bingはマイクロソフトが提供している検索エンジンで、主にWindowsでデフォルトブラウザとして利用されています。PCの検索ではまだ1割近いシェアを持っているので、その1割も徹底的にカバーしたいということであれば、BingのSEO対策も行いましょう。Bingには「webマスターツール」というツールが用意されています。URLやサイトマップの登録、また所有者確認用のタグの埋め込みなどが必要で、それらが完了すればBingの検索結果にインデックスされ、検索結果に表示されるようになります。現在では「ロボット型検索エンジン」が主流となり、その中でも精度の高い情報を提供できるGoogleの利用者が増え、今ではPCからの検索で90%のシェアを誇り、スマートフォンはAndroidの標準ブラウザやiPhoneのsafariの検索エンジンが初期設定ではGoogleになっています。よって、SEO対策はすべての検索エンジンで効果があるというわけではありませんが、「GoogleのSEO対策だけを考える・行う」というのは間違いではありません。検索エンジンではどのようにページを解析して情報を集めているのかwebサイトがクロールされたことを確認したら、次はインデックスに登録できるようにすることが重要です。webサイトが検索エンジンによって検出されたからといって、必ずしもwebサイトがインデックスに格納されるとは限りません。クローラーがページを見つけると、検索エンジンはブラウザと同じようにページをレンダリングします。その過程で、検索エンジンはページのコンテンツを分析します。した分析情報はすべてインデックスに保存されます。クローラーが自分のwebサイト(ページ)をどのように分析しているか確認をするにはページの「キャッシュ」には、Googlebotが最後にクロールしたときの「スナップショット」が反映されます。Googleは頻繁にwebページをクロールおよびキャッシュを行います。ページのキャッシュバージョンを確認するには、検索結果のURL横にあるドロップダウン矢印をクリックし、「キャッシュ」を選択します。「webサイトのテキストのみ」のバージョンを選択して、重要なコンテンツが効果的にクロールおよびキャッシュされているかどうかを判断することができます。19トップSXOとはコラム一覧お問合せ。