Google-Extendedの設定方法
2026-09-28

結論
Google-Extendedは、GeminiやAI Overviewsなど、Googleの生成AI機能の学習・改善のためにコンテンツを利用することを制御するためのトークン名だ。通常の検索インデックス用クローラーとは独立して設定できる点が特徴であり、robots.txtでの正しい書き方を理解しておく必要がある。
Google-Extendedとは
Google-Extendedは、Googlebotのような従来の検索クローラーとは異なり、単独でページを巡回する専用クローラーではない。GoogleがAI関連機能の学習や品質改善にコンテンツを利用することを許可・拒否するためのトークンとして、robots.txt上で機能する仕組みだとGoogle自身が説明している。
この設計により、検索結果への表示(インデックス登録)とAI機能への利用を分離して制御できる。つまりGoogle-Extendedを拒否しても、通常の検索結果からページが除外されるわけではない。
拒否する場合の書き方
Google-Extendedを拒否したい場合は、robots.txtにUser-agent: Google-Extendedという行を追加し、Disallow: /と記述する。これにより、通常のGoogle検索でのインデックスは維持したまま、GeminiやAI Overviewsの学習・生成への利用だけを制限できる。
部分的に制限したい場合は、特定のディレクトリパスをDisallowに指定することで、公開してよいページとそうでないページを切り分けることも可能だ。
許可する場合のメリット
AEO/LLMOの観点では、Google-Extendedを許可しておくことで、AI OverviewsなどのAI生成回答内で自社サイトが引用元として扱われる可能性が生まれる。特別な理由がない限り、拒否せずデフォルトの許可状態を維持するのが基本方針になる。
他のトークンとの違い
Googleには Google-Extended 以外にも、検索インデックス用のGooglebot、画像検索用のGooglebot-Imageなど、用途ごとに異なるユーザーエージェントが存在する。それぞれ役割が異なるため、AI機能に関する設定を行う際はGoogle-Extendedのブロックを個別に用意し、他のGooglebot系トークンの設定と混同しないようにしたい。