2026年10月17日(土)
業界動向

Metaのクローラーが個人サイトのログに現れた——広告収入でGoogleを抜く年に、同社が次に取りに来るのは「インデックス」である

8月10日、Metaが自前の検索インデックスを構築するためにウェブを巡回しているとの観測が広がった。同じ2026年、eMarketerはMetaの世界広告収入が2,434億ドルとGoogleを初めて上回ると予測している。広告費で首位を奪う年に、なぜ検索なのか。これは「Google対抗の検索エンジン」ではなく「AI回答用インデックス」と読むべきだ——その理由と、日本のサイト運営者が今週決めておくべきrobots.txtの方針を整理する。

WebTech Journal 編集部

編集・執筆

|
|
5分で読める

個人サイトのログに、見慣れないクローラーが現れた

8月10日、Search Engine RoundtableがMetaがウェブをクロールしており、独自の検索エンジンを構築している可能性があると報じた。発端は開発者のPieter Levels氏がXに投稿した観測で、自身の複数サイトへのクロール痕跡のスクリーンショットが添えられている。Meta側の公式発表はなく、現時点では「そう見える」という段階の話だ。

ただし裏付けとなる報道もある。Social Media Todayは、MetaがAIチャットボットに回答を供給するための検索エンジンを開発中だと伝えている。GoogleやBingと同種のクローラーで情報を集め、Meta AI内で時事的な話題の要約を生成する構想だという。

Levels氏が伝え聞いたという動機は、率直で分かりやすい。Meta AIがウェブ検索をするたびにGoogleへ問い合わせていては、その検索行動そのものがGoogleの資産になる。だから自前のインデックスを持ちたい——という理屈だ。

同じ年、広告収入では25年ぶりの首位交代が起きる

この動きは単独で見ても面白いが、もう一つの数字と重ねると意味が変わる。

eMarketerは、2026年にMetaの世界純広告収入が2,434億6,000万ドルに達し、Googleの2,395億4,000万ドルを初めて上回ると予測している。前年はMetaが1,961億7,000万ドル、Googleが2,140億6,000万ドルだった。成長率はMetaが24.1%、Googleが11.9%。世界の広告費に占めるMetaのシェアは26.8%になる。

つまり2026年は、Metaが広告市場の首位を取る年であり、同時に検索インデックスの構築に手をつけた年でもある。この並びは偶然ではないだろう。

「検索エンジン」ではなく「回答用インデックス」と読む

ここからは筆者の解釈になる。

Metaが持っていないのは、需要が言語化された瞬間の接点だ。Facebook、Instagram、Threadsが強いのは、ユーザーがまだ欲しいものを言葉にしていない段階——ディスカバリーの領域である。一方、「〇〇 比較」「〇〇 料金」と打ち込まれる瞬間の接点は、長らくGoogleが独占してきた。広告収入で首位に立っても、この空白は埋まらない。

加えて、隣のプレイヤーが動いている。OpenAIはChatGPT Ads Managerに機能を積み上げ、広告プラットフォームとしての体裁を整えつつある。Googleは検索とAIの両方を握っている。生成AIが「答えを返す場所」になるほど、答えの材料を自前で持たない事業者は他社に依存する構造になる。

だからこの動きは、Googleと10位までのランキング品質を競う汎用検索エンジンの話ではないと考えるのが自然だ。必要なのは、AIが回答を組み立てるための鮮度の高いインデックスであって、青いリンクの一覧ではない。要求される品質の種類が違うぶん、参入障壁は「検索エンジンを一から作る」より低い。

もちろん懐疑的な見方もある。Facebookは10年以上前から自前検索を志向し、Bingとの提携を結んでは解消してきた歴史がある。クロールインフラの維持は恒常的なコストで、Metaが今回も途中で降りない保証はない。加えて同社は規制対応の負荷も増している。本誌が8月8日に報じたMeta敗訴と「通知を止めろ」の一行が示すように、プラットフォーム側の設計自由度は狭まる方向にある。

日本のサイト運営者が今週決めておくこと

  1. ログでMeta系クローラーの挙動を確認する。 Metaは自社クローラーのUser Agentを公開しており、meta-externalagent はその一つだ。CDNやアクセスログで、この数週間にクロール頻度が変わっていないかを見ておく。変化があったなら、それは自社が新インデックスの対象になっているサインだ。

  2. robots.txtの判断を「学習」と「引用」で分ける。 AI関連クローラーの許否は、Google-ExtendedやGPTBotで一度議論したはずのテーマだ。だが今回は論点が違う。遮断すれば学習データから外れると同時に、Meta AIの回答からも自社が消える。月間数十億人が触れる面での引用機会を、コンテンツ保護と引き換えに手放すかどうかの判断になる。この二択を混同したまま「AIは全部ブロック」と決めるのは、今年からはもう乱暴だ。

  3. Meta AI上での自社ブランドの見え方を、今のうちに手で確認する。 自社名・主力商品・カテゴリ名で数十件試し、スプレッドシートに残しておく。インデックスが本格稼働してからでは、それ以前との比較ができない。計測ツールが対応するのを待っていると、ベースラインを取り逃す。

広告費の首位交代は数字が出た時点で確定した話だが、インデックスの話はまだ観測段階だ。それでも、ログを見るコストはゼロに近い。確定してから動くと、今度は自社の履歴が残っていない。

関連記事

業界動向

AIエージェントが本物のフォームを送信した——Anthropicの「意図しない挙動」報告から考える、サイト運営者の点検リスト

Anthropicが、Claudeが評価や社内利用の中で実在サイトのフォーム送信やトークン利用など意図しない作用を起こした事例を公表した。実害は最小限とされるが、設定ファイルのトークンや誰にでも発行される認証、氏名不要のフォームなど、公開サイトの「穴」をAIが課題解決の手段として使いうることを示す。事実と考察を分け、運営者が今週できる3つの点検を示す。

業界動向

「AIの回答源を操作する」行為がAnthropicの利用規約で明文禁止に——Googleのスパムポリシーと並び、GEO施策の“越えてはいけない線”が見えてきた

Anthropicは10月8日、利用規約の改定を発表した(11月12日施行)。新設の「欺瞞的キャンペーン」の章に、検索エンジンやAIが回答を引き出す情報源の操作が含まれた。Googleも同様の趣旨をスパムポリシーに置く。GEO施策を依頼・実施する側が、どこまでが施策でどこからが操作かを考えるための材料を整理する。

業界動向

「AIに読まれても払われない」問題に3つの値札が出そろった——Google実験・Cloudflare・Microsoftの対価モデルを、日本の媒体社はどう読むか

AIエージェントのアクセスが1年で1,700%増えるなか、Google・Cloudflare・Microsoftが相次いでコンテンツ対価の仕組みを出している。支払いの条件と価格を誰が決めるのかという軸で3モデルを比較し、Googleの実験で一部媒体の受取が広告収益の0.1%未満にとどまる点、日本での提供が未確認である点を整理。媒体社と企業サイトが今のうちに行うべき3つの準備を示す。