サーチコンソールから、
インデックス対象範囲の問題についての通知が来たため、
robots.txtを作り、サイトのサーバーにアップし、確実に存在するはずなのに、
robots.txtのテストで存在しないと言われる事がありました。
思ったよりすぐに片付いたのでここに備忘録として残します。
関連記事
>サーチコンソールの、インデックスカバレッジの問題が新たに検出されました。(URLにnoindexタグが追加されています。)への対処方法。
>インデックス登録の対象範囲の問題が新たに検出されましたの対処法
robots.txtのブロックテスターにて、見つかりません(404)が出た
新しいグーグルサーチコンソールにて、
robots.txtによるブロックをテストすることができます。
インデックス対象範囲の問題に関しては他のサイトでも同じようにrobots.txtをアップし、
対応したことが過去にあったので大丈夫だと思っていたのですが、
一応の意味でテストをしてみました。
すると、次のような表示が出ました。
少しびっくりし、
戻って更新ボタンを押したり何度か試したのですが最初はどうにもなりませんでした。
URL/robots.txtにも存在するのに無いという回答
サイトのURLの後ろに /robots.txt をいれると、ロボッツの存在を確認できます。
それもして明らかに存在しているのですが無いということでした。
robots.txtテスターで、存在をグーグルに送信する
解決法としては次のようにテスターに、
サイトに存在するrobots.txtを書いて、ブロック済みとなっているところ(元はテスト)を押してブロック済みとし、その後送信を押します。(テストはいらないかもしれません。)
すると、次のようなものが出てきます。
ここで、googleに更新をリクエストというのを押したところ、
その後からrobots.txtテスターを押しても、見つかりませんとは言われなくなりました。
これでおそらく大丈夫だと思いますが、
「今回のrobotsを作るに至った理由であるグーグルからの注意」に対する再審査の回答がまだなので、
現在は待っている状態です。大丈夫であればここで大丈夫だと書きます。
ご参考になれば幸いです。
ではでは〜(。・ω・)ノ゙
追記:2018年3月29日
大丈夫でした。
robotsが無いと言われたサイトのみ審査がすごく時間がかかっていたのですが、
昨日審査完了のメールがきました。
ではでは〜(。・ω・)ノ゙