サイト実装・技術要素
Google-Extendedとは?
結論
Google-Extendedとは、Googleがクロールしたコンテンツを、Geminiモデルの学習やグラウンディングに使ってよいかをサイト運営者が制御するためのrobots.txt用のトークン。独立したクローラーではない。
Google-Extendedという名前のボットがサイトを巡回するわけではなく、実際のクロールは既存のGoogleのユーザーエージェントが行い、Google-Extendedはrobots.txt上で用途を制御するためだけに使われる。`User-agent: Google-Extended` と `Disallow: /` を記述すると、今後のGeminiモデルの学習と、回答生成時にGoogle検索インデックスの情報を与えるグラウンディングに自社コンテンツを使わないよう指示できる。
Googleは、Google-ExtendedがGoogle検索への掲載や検索順位に影響しないと公式に明記している。AI OverviewsはGoogle検索の機能であり、通常のクロールと検索向けの設定(nosnippet等)の対象になるため、Google-Extendedのブロックで止まるものではない。一方でグラウンディングへの利用を拒否すると、Geminiの回答で自社情報が根拠として使われる機会を狭める可能性がある。
自社サイトはGoogle-Extendedの観点でどう見えている?
無料ツールでその場で診断できます(登録不要)