サイト実装・技術要素
noindexとは?noindex
結論
noindexとは、特定のページを検索エンジンのインデックス(検索対象のデータベース)に登録しないよう指示する記述。`<meta name="robots" content="noindex">`タグやX-Robots-Tagヘッダーで指定する。
robots.txtがクロール(取得)を制御するのに対し、noindexはインデックス登録を制御する点が異なる。robots.txtでクロールをブロックしたページにnoindexを書いても、クローラーがページを読めないため指示が伝わらない点に注意が必要である。サンクスページや社内向けページ、重複ページなど、検索結果に出す必要のないページに使われる。
GoogleのAI Overviewsなどで出典として表示されるには、ページがGoogleにインデックスされ、検索結果にスニペット付きで表示できる状態であることが前提になる。CMSの設定ミスやテンプレートの流用で、重要なページに意図せずnoindexが付いていると、検索でもAI検索でも存在しないのと同じ扱いになりうる。AI企業ごとのクローラーがnoindexをどう扱うかは各社の仕様による。