1日GoogleサーチコンソールでURLチェックを実行すると、「HTTPが無効でインデックスが作成されない可能性があります」という警告が表示され、「クロール失敗」と「HTTPS評価されていません」というエラーが表示されることがあります。数日前から、Googleウェブマスターツールでrobots.txtファイルを正しく検出できない問題が発生することを発見した。問題の発端は、いくつかのブログでブロックされたリソースが多い文を見て、Googleウェブマスターツールでブロックされたリソースのレポートを確認して修正した後に発生しました。