Google、サイトをCDNに移すときのクロールの注意点を解説(ボット対策でGooglebotを止めない)
- 日付
- 2026年11月11日
- 公式の発表
- 2026年11月11日
- AdClassで確認した日
- 2026年11月15日
この記事は、公式の発表をもとにAIで要約したものです。正確な内容は下の出典(公式のお知らせ)でご確認ください。
3行でいうと
- CDNで応答が速くなると、Googleはサーバーに余裕があると判断してクロールの頻度を上げる。一方、CDNは最初キャッシュが空なので、その間のアクセスは元のサーバーに届く
- ボット対策を一律にオンにすると、Googlebotも画像認証などで止められ、ページが検索から落ちていくおそれがある
- 対処は「確認済みのボットを許可する設定」「移行前に主要ページのキャッシュを温める」「どうしても重いときだけ短期間429か503を返す」
何が変わるか
Google 検索セントラルのブログで、サイトをCDNに移すときのクロールの注意点が解説されました。新しい仕様の発表ではなく、移行時に起きやすいトラブルとその対処をまとめた記事です。
CDNに切り替えると応答が速くなり、Googleのクローラーは「サーバーの処理能力が上がった」と判断して、クロールの頻度を少しずつ上げます。ところが、移行直後のCDNはキャッシュが空で、1つのURLへの最初のアクセスは元のサーバー(オリジン)まで取りに行きます。人の訪問は人気のページに集まってすぐキャッシュされますが、クローラーはサイトの幅広いURLを順に回るため、キャッシュが温まるまでは元のサーバーの負荷が下がりません。
このアクセス増を見てCDNやWAFでボット対策を一律にオンにすると、Googlebotも画像認証などの確認画面で止められます。そのままにしておくと、Googleのクローラーはアクセスを控えるようになり、ページやショッピングの掲載が検索から落ちていくとしています。
対処として、Googleは次の3つを挙げています。ボットを止める必要があるときは、CDNやファイアウォールの「確認済みのボットを許可する」設定を使う(不要なボットだけをrobots.txtやルールで指定する)。すべてのアクセスをCDNに切り替える前に、アクセスの多いページやよくクロールされるURLを先に読み込んでキャッシュを温めておく。それでも元のサーバーが重いときは、数時間〜長くても1〜2日だけ、429または503のステータスコードを返して一時的にクロールを抑える。
担当者がやること
0 / 2 完了AIに貼って使うプロンプト
ChatGPT・Gemini・Claude など、どれでも使えます
アカウントの状況を書き込むと、影響があるかどうかと、やることの手順を出してくれます。
あなたはWeb広告の運用を手伝うアシスタントです。 次の広告媒体の変更について、私のアカウントへの影響を整理してください。 【変更の内容】 媒体:Google検索 変更:Google、サイトをCDNに移すときのクロールの注意点を解説(ボット対策でGooglebotを止めない) 内容:Googleは、サイトをCDN(コンテンツ配信ネットワーク)に移した直後にクローラーのアクセスが増える理由と、その間にサーバーを守りつつ検索から消えないための対処を解説しました。仕様の変更ではなく、運用の手引きです。 公式の発表:2026年11月11日 公式のお知らせ:https://developers.google.com/search/blog/2026/11/crawling-cdn 【私の状況】 ・業種:[例:パーソナルジム] ・使っている広告・キャンペーン:[例:Google検索で動かしているキャンペーンの種類と本数] ・作成・管理の方法:[例:管理画面だけ/Google Ads Editor やAPI・スクリプトも使う/GTMで計測] ・気になっていること:[例:自分のアカウントが対象になるかどうか] 次の3つを出してください。 1. 私のアカウントに影響があるかどうかと、その理由(影響がなければ「対応不要」と一言で終えてよい) 2. やることを優先順に並べたチェックリスト 3. 管理画面で確認する手順 公式のお知らせを開けない場合はその旨を書いてください。わからない点は推測で埋めず、「公式のお知らせで確かめること」として分けて書いてください。
出典:Google 検索セントラル ブログ「Moving to a CDN without overwhelming your origin (or blocking Googlebot)」(英語)
まとめ方:公式の発表をもとにAIで要約し、AdClass 編集部が運用担当者向けに整えています。最新の仕様は必ず公式のお知らせでご確認ください。