サイト実装・技術要素
Bingbotとは?
結論
Bingbotとは、MicrosoftがBing検索のインデックスを構築するために運用するクローラー。Bingのインデックスは通常の検索結果だけでなく、Microsoft CopilotなどのAI回答の情報源としても使われる。
Googlebotと並ぶ主要な検索エンジンクローラーで、robots.txtに従う。Bingbotをブロックすると、Bing検索だけでなく、Bingのインデックスを参照するAI回答にも影響が及ぶ可能性がある。そのためMicrosoftは、AIでの利用だけを制限したい場合の手段として、robots.txtではなくmetaタグのNOCACHE・NOARCHIVEによる制御を案内している。
Microsoftの説明では、NOARCHIVEを指定したコンテンツはBing Chat(現Copilot)の回答に含まれず、生成AIの基盤モデルの学習にも使われない。NOCACHEの場合は回答にURL・タイトル・スニペットのみが表示される。いずれも通常の検索結果には引き続き表示されるため、AI経由の露出を狙うなら、これらのタグを意図せず付けていないかも確認したい。