おしい県でWebに携わって働く人のブログスマートフォン用の表示で見るおしい県でWebに携わって働く人のブログ2年ぶりにWebに携わる仕事に舞い戻ってきたので更新再開します。基本的にはIT&Web界隈に関する役に立ちそうなことをまとめていきます。SEOに有効な「robots.txt」の書き方と設定方法まとめこの広告は、90日以上更新していないブログに表示しています。2014-06-14SEOに有効な「robots.txt」の書き方と設定方法まとめWebその他Webサイト制作に関することは全て独学で学んだのですが、いつの頃からかなんとなーく使っている「robots.txt」というファイルについて、その利用用途や書き方などを改めて知りたいと思い、ググって調べてみました。「robots.txt」とは自分のWebサイトのディレクトリやファイルに検索エンジンのクローラーがアクセスするのを制御する為に使われるテキストファイルです。「このディレクトリにあるファイルにはアクセスさせない」とか「kensaku.htmlというファイルにはアクセスさせない」という感じで設定します。このことから、SEO的には「クロール最適化」の手段の一つとして挙げられています。「robots.txt」のファイル名は必ず「robots.txt」にします。「robot.txt」でも「robots.html」でも「Robots.txt」でも「.robots」でもダメです。「robots.txt」はWebサイトのルートディレクトリ(ルートドメイン)に設置します。WebサイトのURLが「http://hogehoge.com」の場合には「http://hogehoge.com/robots.txt」に設置します。ちなみに「http://hogehoge.com/blog/robots.txt」などに設置しても効果はありませんので要注意です。「robots.txt」には下記の四つの要素を記述することができます。User-Agent:Disallow:Allow:Sitemap:User-Agent:どのクローラーの動きを制御するかを指定する要素で「*」は全てのクローラーに指示する設定になります。「User-Agent:Googlebot」と記述すると、検索エンジンGoogleのクローラー(Googlebot)に対して指示することになります。基本的には「*」と記述しておけば大丈夫です。Disallow:User-Agentで指定したクローラーのアクセスを制御するディレクトリやファイルを指定する要素です。/fuka-file.htmlAllow:上記Disallowの反対の意味の要素でアクセス許可を設定する要素ですが、基本的には使いません。Sitemap:sitemapファイルの場所をクローラーに知らせるための要素です。これを記述しておくとクローラーがsitemapファイルを積極的に読みにいくようになります。記述しておくようにしましょう。http://hogehoge.com/sitemap.xml全てのクローラーに対して、adminフォルダへのアクセスは不可。http://hogehoge.com/sitemap.xml全てのクローラーに対して、サイト全体がアクセス不可だが、blogフォルダのみアクセス可。http://hogehoge.com/sitemap.xmlGoogle検索のクローラーに対して、google-dameフォルダへのアクセス不可。Google画像検索のクローラーに対して、dame-photoフォルダへのアクセス不可。Sitemaps」というプラグインをバー...2014-03-30ワードプレスでプチトラブルが発生した時にググって調べたことまとめ。最近コソコソとワードプレスを使って遊んでいるのですが、いろ...2014-01-20「GitHubとはなんぞや?」という疑問が浮かんできたので調べてみた。日)おしい県在住のWebに携わってた人。久しぶりーにWebに携わる仕事に舞い戻ってきたので更新を再開することにしてみたがいつまで続くかは未定。自社の採用サイトをIndeedに表示させる方法ブラウザの操作を自動化してくれる!便利すぎるWEB自動化ツール「iMacros」に関する参考サイト&記事まとめ活字離れしてる社会人必見!管理人が読んでとても参考になったビジネス漫画14冊。これだけ買えば間違いない!?筋トレしたい人にオススメの参考書籍7冊。ビジネス文書のテンプレートがダウンロードできるサイト6選。一夜漬けで最近流行りの動画マーケティングを勉強したい人にオススメのサイト&ブログ5選。バージョン管理システム「Git」を勉強したい人にオススメのサイト&ブログまとめ。2017年版!WEBに携わる人ならとりあえず読んでおくべきSEOの最新情報がわかる記事6選。ツイートはてなブログをはじめよう!lord_cashewさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。