MAKEPO(マケポ)ノウハウをいつでも。サイト運営者なら知っておきたい!クロール対策の基本ツイートクロール対策って実際のところ、SEOに必要なの?よくわからない......と感じている方、実は結構多いのではないでしょうか。サイトを運営するなら押さえておきたいクロールの仕組みと、クロール対策の基本をまとめました。その情報、Googleに届いていますか?Googleは、Web上にある膨大な情報を収集し、データベースに登録しています。検索ユーザーは、そのデータベースを使って検索を行っています。Web上にページを公開すれば、すぐにそのページが検索結果に出てくる......というわけではありません。いくつかのステップが必要なのです。そのため、多くの人を検索から呼び込むためには、まず、Googleが適切に情報収集してくれるよう、そしてコンテンツの中身を正しく理解してくれるよう、準備を整えておく必要があります。Googleが情報収集した結果、ページの持つ情報が検索ユーザー(検索キーワード)に適合する良質なものである、と判断されれば、検索上位に表示され、多くの人に見てもらえることにつながる......というわけですね。Googleの情報収集は極めて優秀なので、上記のような準備をたとえしていなかったとしても、公開したページがいつまでもGoogleに見つけてもらえない(検索結果に出てこない)ということは通常あまりありません。できることならスムーズかつスピーディに、最新の情報を検索結果に反映したいですよね。した結果につながる「準備」の中から「クロール」について詳しく取り上げてみたいと思います。無駄なくクロールしてもらうための準備を整え、スピーディかつ効果的に、検索結果に情報を送り込みましょう。クロールの状況をチェックするGoogleは、クローラ・Googlebot・スパイダーなどと呼ばれるプログラムを使ってWeb上を巡回し、情報収集しています。各サイトがいつ、どのくらいの頻度で、どのように巡回されているのかは公開情報ではありませんが、サイトによって違いがある、ということはGoogleによって明言されています。ページが多く、さらに日々追加されていくようなタイプの大規模サイトでは特に、できるだけスピーディに、適切にクロールしてもらう必要がありますよね。Console(https://www.google.com/webmasters/)で確認できるので、まだ見たことがないという方は、問題なくクロールが行われているか、まずはチェックしてみてください。Consoleでは、過去90日間のクロール状況を確認できます。サーバーのトラブルによってサイトの一部が正しく公開されていなかったり、サイト運営者側からGoogleに、クロールしてほしい範囲について希望を伝えるためのrobots.txtの指定に間違っていたりなど、適切なクロールを阻むさまざまなエラーが発生した際に、状況を教えてくれます。Consoleヘルプに詳細があるので、もし不具合が発生してしまっていたら、ヘルプを確認してみましょう。レポート(https://support.google.com/webmasters/answer/35120?hl=ja&ref_topic=2446029&rd=1)クロールされやすくする工夫をしよう各サイトには「クロールバジェット」すなわち「クロールの回数制限」があると言われることがあります。Googleが明言したことではありませんが、この説については、真偽よりも主旨、すなわち「よりクロールされやすいサイト」「効率的にクロールされるサイト」を作ることが大切である、との主張に注目してほしいと思います。クロールバジェットが、もし実在しないものであったとしても、この結論が重要であることには変わりありません。クロールされやすいサイトづくりのための具体策としては、以下のようなものがあげられます。Consoleでエラーのないことを確認するページ同士をリンクし、サイト構造を整理してURLをたどりやすくするサイトマップを作り、サイト構造を伝える上記3点は、Googleに適切にクロールしてもらうための工夫であると同時に、サイトの訪問ユーザーにとってわかりやすいサイトを作るための工夫、運営側がページ数やサイト構造について把握しやすくするための工夫でもあります。正しいHTMLのルールに従い、タイトルや見出し、キーワードの使い方に気を使って、良質な情報発信に注力しているサイトでは、クロールについて神経質になる必要は(おそらく)ありませんが、上記のような付属的なメリットも踏まえて、クロール対策を行ってみると良いのではないかと思います。Consoleでは、誤って公開してしまった情報を検索結果から削除するためのGoogleへの申請なども行えますが、そうした申請の流れや、クロール・インデックスといった検索の仕組みについて理解しておくのも、SEOを実施するにあたっては大切なことです。Consoleを始め、検索や検索関連サービスの公式のヘルプやブログなど、豊富に情報を提供してくれますが、それらの情報を自社のSEOに活かすためには、検索の仕組みについて知っておくことが欠かせません。長期的にSEOを行っていく心づもりのある方は、ぜひクロール対策や検索の仕組みにも、目を向けてみてください。コンテンツマーケティング/インバウンドマーケティング/SEOといったWebマーケティングに関すること。クラウドソーシングを活用して、オウンドメディア・メルマガなど、企業の各種コンテンツ作成のお手伝いをしています。2014年には、ランサーズでエキスパート認定をいただきました。実績は上記リンクからご確認ください。他の参加者を見る関連記事2015.08.31ammolite情報発信の土台を作る!ウェブサイトUI戦略2015.02.09ammoliteアップデートでGoogleはどう進化した?最重要事項を再確認しよう2015.04.13ammolite買う?買わない?「SEOテンプレート」の便利なところ2014.11.17ammolite自社運用を目指す【オウンドメディア総合支援ツールまとめ】マーケティングノウハウ足りてますか?MAKEPOのメルマガ...購読してみませんか?直近のピックアップ記事のほか、セミナー・ツール活用情報など不定期でお伝えしています。「サイトにアクセスするのは面倒だ!」「電車の中でざっくり読みたい」という方は是非ご登録ください。