まえがき
Google Search Console からメールを受信しました。
[メールに記載されたキーワード]
- Search Console
- インデックスカバレッジ
- Google検索結果で悪影響を受ける可能性
- robots.txtによりブロックされたがインデックスに登録した
...(o|o)
インデックスカバレッジ、robots.txt、...？？？
インデックスカバレッジとは？
Google Search Consoleに記録された「インデックス カバレッジ」を転載します。
サイト https://kzstock.blogspot.com/ で「インデックス カバレッジ」の問題が新たに検出されました
https://kzstock.blogspot.com/ の所有者様
Search Console により、貴サイトに影響する「インデックス カバレッジ」関連の問題が新たに 1 件検出されました。 「インデックス カバレッジ」は Google 検索結果で悪影響を受ける可能性がございます。 この問題をご確認のうえ、修正することをご検討ください。
新たに検出された問題:
robots.txt によりブロックされましたが、インデックスに登録しました
クローラーは何でもインデックスするのか？
「robots.txt によりブロックされましたが、インデックスに登録しました。」
このブログの robots.txt は、Google のクローラーをブロックする設定になっていました。
Blogger 側の設定は変更していないため、デフォルトでこのような挙動になっていた可能性があります。
一方で、Google はクロールを制限されているにもかかわらず、当該ページをインデックスに登録していました。
仕様としてはやや分かりにくい挙動です。
＊クロール不可でもURL単位でインデックスされるケースがある（外部リンク等が起点）
修正項目
robots.txtを無視してインデックスされていることがわかったので修正はムダだと思われますが、エラーを見たくないので修正にチャレンジしました。
[修正したファイル]
- 独自の robots.txt
- カスタム ads.txt
独自の robots.txt
Blogger > 設定 > 検索設定 > 独自の robots.txt
Search Console によると /search/label/xxx.html のコンテンツにクローラがアクセスできないと駄々をこねています。
そこで、
「独自の robots.txt」に以下の記述を追加しました。
Allow: /search/label/
Disallow: /*archive
Sitemap: https://kzstock.blogspot.com/feeds/posts/default?orderby=UPDATED
Sitemap: https://kzstock.blogspot.com/sitemap.xml
以下は任意です。（たぶん不要）
Sitemap: https://kzstock.blogspot.com/feeds/posts/default?orderby=UPDATED
sitemap.xmlをSearch Consoleから登録する
robots.txt に sitemap.xml を追記した場合は Search Console にログインして sitemap.xmlを登録しておくとSEOに効果があるそうです。（Bloggerは自動で登録している？）
Search Console > クロール > サイトマップ > サイトマップの追加／テスト
sitemap.xml と入力して送信をクリックする。
Bloggerサイトにsitemap.xmlが自動生成されているかを確認するには、以下のアドレスにアクセスします。
accountNameは自分のBloggerのアカウント名です。
- https://accountName.blogspot.com/sitemap.xml
カスタム ads.txt
この項目は編集する必要はありませんが Google アドセンス を不正利用されないよう設定してみました。
出典： 自サイトの広告枠の認定販売者を ads.txt で宣言する - アドセンス ヘルプ
Google を自サイトの広告枠の認定販売者として宣言する場合、次のように ads.txt を作成します。
テキスト ファイル（.txt）を作成します。
ファイル内に次の 1 行を含めます。
google.com, pub-0000000000000000, DIRECT, f08c47fec0942fa0
重要: 「pub-0000000000000000」の部分はご自分のサイト運営者 ID に置き換えてください。
資料：Search Console
インデックスカバレッジとは、Google検索クローラー（検索エンジン）が世界中のウェブサイト情報を収集してランク付けした結果データ、または、収集する行為を指しているようです。
Search Consoleのヘルプあとがき
[BloggerとSearch Console]
- Bloggerデフォルトはrobots.txtを拒否する設定の記述がある (Disallow)
- Disallowだがクローラーはインデックスする
- sitemap.xmlの登録状態を確認した方がよい
このサイトを検索 | Search this site
![[イベントID264] Defrag エラーが発生した場合の対処方法 (0x8900002F)](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEiN6dqRB2WfXdfAKB10FDjdJ2p22frW5ahcNd07xf7-Dux9uDfiM1RGf7v6iO-QRooVfr3FsZNkpRKcO8Or0JcmQeJ5ud_ns3dfE7tQwoVZB2bsZbTKUaxVjG_CqSTho3hre6kT7T4mOBGz/w680/redyellow_317x.gif)
