2026年9月9日(水)
業界動向

Metaのクローラーが個人サイトのログに現れた——広告収入でGoogleを抜く年に、同社が次に取りに来るのは「インデックス」である

8月10日、Metaが自前の検索インデックスを構築するためにウェブを巡回しているとの観測が広がった。同じ2026年、eMarketerはMetaの世界広告収入が2,434億ドルとGoogleを初めて上回ると予測している。広告費で首位を奪う年に、なぜ検索なのか。これは「Google対抗の検索エンジン」ではなく「AI回答用インデックス」と読むべきだ——その理由と、日本のサイト運営者が今週決めておくべきrobots.txtの方針を整理する。

WebTech Journal 編集部

編集・執筆

|
|
5分で読める

個人サイトのログに、見慣れないクローラーが現れた

8月10日、Search Engine RoundtableがMetaがウェブをクロールしており、独自の検索エンジンを構築している可能性があると報じた。発端は開発者のPieter Levels氏がXに投稿した観測で、自身の複数サイトへのクロール痕跡のスクリーンショットが添えられている。Meta側の公式発表はなく、現時点では「そう見える」という段階の話だ。

ただし裏付けとなる報道もある。Social Media Todayは、MetaがAIチャットボットに回答を供給するための検索エンジンを開発中だと伝えている。GoogleやBingと同種のクローラーで情報を集め、Meta AI内で時事的な話題の要約を生成する構想だという。

Levels氏が伝え聞いたという動機は、率直で分かりやすい。Meta AIがウェブ検索をするたびにGoogleへ問い合わせていては、その検索行動そのものがGoogleの資産になる。だから自前のインデックスを持ちたい——という理屈だ。

同じ年、広告収入では25年ぶりの首位交代が起きる

この動きは単独で見ても面白いが、もう一つの数字と重ねると意味が変わる。

eMarketerは、2026年にMetaの世界純広告収入が2,434億6,000万ドルに達し、Googleの2,395億4,000万ドルを初めて上回ると予測している。前年はMetaが1,961億7,000万ドル、Googleが2,140億6,000万ドルだった。成長率はMetaが24.1%、Googleが11.9%。世界の広告費に占めるMetaのシェアは26.8%になる。

つまり2026年は、Metaが広告市場の首位を取る年であり、同時に検索インデックスの構築に手をつけた年でもある。この並びは偶然ではないだろう。

「検索エンジン」ではなく「回答用インデックス」と読む

ここからは筆者の解釈になる。

Metaが持っていないのは、需要が言語化された瞬間の接点だ。Facebook、Instagram、Threadsが強いのは、ユーザーがまだ欲しいものを言葉にしていない段階——ディスカバリーの領域である。一方、「〇〇 比較」「〇〇 料金」と打ち込まれる瞬間の接点は、長らくGoogleが独占してきた。広告収入で首位に立っても、この空白は埋まらない。

加えて、隣のプレイヤーが動いている。OpenAIはChatGPT Ads Managerに機能を積み上げ、広告プラットフォームとしての体裁を整えつつある。Googleは検索とAIの両方を握っている。生成AIが「答えを返す場所」になるほど、答えの材料を自前で持たない事業者は他社に依存する構造になる。

だからこの動きは、Googleと10位までのランキング品質を競う汎用検索エンジンの話ではないと考えるのが自然だ。必要なのは、AIが回答を組み立てるための鮮度の高いインデックスであって、青いリンクの一覧ではない。要求される品質の種類が違うぶん、参入障壁は「検索エンジンを一から作る」より低い。

もちろん懐疑的な見方もある。Facebookは10年以上前から自前検索を志向し、Bingとの提携を結んでは解消してきた歴史がある。クロールインフラの維持は恒常的なコストで、Metaが今回も途中で降りない保証はない。加えて同社は規制対応の負荷も増している。本誌が8月8日に報じたMeta敗訴と「通知を止めろ」の一行が示すように、プラットフォーム側の設計自由度は狭まる方向にある。

日本のサイト運営者が今週決めておくこと

  1. ログでMeta系クローラーの挙動を確認する。 Metaは自社クローラーのUser Agentを公開しており、meta-externalagent はその一つだ。CDNやアクセスログで、この数週間にクロール頻度が変わっていないかを見ておく。変化があったなら、それは自社が新インデックスの対象になっているサインだ。

  2. robots.txtの判断を「学習」と「引用」で分ける。 AI関連クローラーの許否は、Google-ExtendedやGPTBotで一度議論したはずのテーマだ。だが今回は論点が違う。遮断すれば学習データから外れると同時に、Meta AIの回答からも自社が消える。月間数十億人が触れる面での引用機会を、コンテンツ保護と引き換えに手放すかどうかの判断になる。この二択を混同したまま「AIは全部ブロック」と決めるのは、今年からはもう乱暴だ。

  3. Meta AI上での自社ブランドの見え方を、今のうちに手で確認する。 自社名・主力商品・カテゴリ名で数十件試し、スプレッドシートに残しておく。インデックスが本格稼働してからでは、それ以前との比較ができない。計測ツールが対応するのを待っていると、ベースラインを取り逃す。

広告費の首位交代は数字が出た時点で確定した話だが、インデックスの話はまだ観測段階だ。それでも、ログを見るコストはゼロに近い。確定してから動くと、今度は自社の履歴が残っていない。

関連記事

業界動向

Googleが10月30日、YouTubeの酒類広告に「個人化」を解禁する——除外4カ国に日本は入っていない

9月3日、Googleが個人化広告ポリシーの改定を公式に告知した。2026年10月30日から、現地法が許す範囲でYouTube在庫における酒類広告の個人化が可能になる。対象には「アルコール代替飲料」も含まれる。除外されるのはエジプト・インド・インドネシア・ポーランドの4カ国で、日本は入っていない。ただしプラットフォームが解禁しても、日本では酒類業界の自主基準が別のレイヤーで効く。何が変わり、何が変わらないのかを、公式ポリシー文と自主基準の両方から整理する。

業界動向

Googleの検索ログに値札がついた——9月17日から契約書配布、AIチャットボットも受給者になれる欧州のデータ開放と、蚊帳の外の日本

Googleが8月31日、DMA第6条11項に基づく欧州検索データセットのライセンス条件を更新した。ランキング・クエリ・クリック・ビューの4種を、EEA向けの検索エンジン——検索機能を持つAIチャットボットを含む——に開放する。9月17日から契約書配布、11月16日からサンプル提供。ただし月間5万ユーザー以上、第三者監査必須という高い壁がある。日本に同等の義務がないことが何を生むかまで踏み込む。

業界動向

人間には見えず、AIにだけ配信される広告——Perplexityが「欺瞞的」と断じ、Timeの実験を遮断した

TimeがAIクローラー向けMarkdown版ページにだけスポンサー広告を挿入し、Perplexityがこれを欺瞞的として自社インデックスから遮断した。The Registerの検証ではClaudeBotやOAI-SearchBotにはスポンサー入りの版が、Googleの検索クローラーには人間向けHTMLが返っていた。クローキングなのか正当なフィードなのか。IABのフレームワークも未対応のこの空白地帯で、日本の広告主とパブリッシャーが今から確認すべき点を整理する。