同じエンジン、同じ質問。検索を許した途端、32のうち残る名前は一つだけ
今朝、四つの職種で測定。この結果に、私たちは自分の採点法を直さざるをえませんでした - 検索しなかったエンジンは、もう「不在」に票を投じません。
これまでやったことのない実験を一つ。結果として一週間の修正を要したものです。アシスタントを一つだけ取ります - Gemini。質問も一つだけ。「ボルドーで一番いい配管業者は？」。モデルも、言い回しも、日付も変えません。変えるのは一点だけ - 答える前にGoogleを見ることを許すか、許さないか。
2026年8月10日の今朝、四つの都市の四つの職種で実施しました。ボルドーの配管、ナントの歯科、トゥールーズの自動車整備、ストラスブールの高級料理店。八つの質問、エンジンは一つ。結果はこうです。記憶から挙がった企業名が32、検索したうえで挙がった企業名が32、そして両方の一覧に共通する名前はたった一つ。三パーセントです。
これは同じ回答の二つの版ではありません。同じ署名を持つ、二つの別の回答です。
これがあなたの会社にとって何を意味するか
二つの回答は、自信の調子がまったく同じです。検索なしのGeminiは「顧客の評価と地域での評判に基づく、日ごろから推薦されているボルドーの配管業者の一覧」と前置きし、名前を挙げます。検索ありでは「利用者の声とマッチングプラットフォームに基づく推薦」と前置きし、別の名前を挙げます。情報源が入れ替わったことを読み手に知らせるものは、文面のどこにもありません。
ところが、あなたの客が使うのはアプリのほう - 検索するほうです。検索なしでモデルに問い合わせる道具で自社の可視性を試すなら、測っているのはその記憶です。学習のときに覚え、数か月前で止まったもの。それは実在する有用な情報で、知名度はまさにそこで測れます。しかし、今日あなたの客が見ているものではありません。
私たちは自分の採点法を直さねばなりませんでした
この区別は私たちにとって理屈ではありません。製品を壊したのです。無料診断は二つのエンジンに問い合わせます - 一方はウェブを検索し、他方は記憶で答える - そして点数は両者の平均を取っていました。算術上の帰結はこうです。検索するエンジンに一位で挙げられた企業でも、検索しないエンジンの沈黙に引き下げられ、100点中50点で頭打ちになる。実際には15や30まで落ち、報告書には「可視性が低い」と出ていました。
それまでの三週間で、74件の診断のうち56件がちょうど0を返していました。ある利用者が、この上なく簡潔な言葉で指摘してくれました。自分の会社はChatGPTのアプリに出てくるのに、あなたたちの道具は零点をつける、と。その人が正しく、私たちが誤っていました。
8月9日に規則を変えました。少なくとも一つのアシスタントが実際にウェブを検索した場合、点数はそのアシスタントだけを数えます。記憶で答えるモデルは、あなたの可視性を証言していません - その「存じません」は零ではなく、未測定です。頭打ちだった同じ診断が、いまはエンジンが本当に見つけたものを映す点数を返し、報告書は誰が検索し誰が思い出したかを必ず名指しします。
問題は私たちの一件をはるかに超えます
今日、AI可視性を測る道具を売る会社は二十社を超え、方法が違えば同じブランドに違う答えが出ます。最もよくある断層は、まさにいま私たちが測ったところです - モデルのAPIに問い合わせるのか、利用者がアプリで見ているものを観察するのか。どちらにも欠点があります。APIはアプリが知っていることを過小に見積もり、画面の採録は個人化された一回分を標準と取り違えて過大に見積もります。
この種の道具を買う側にとっての実際的な帰結はこうです。取引先に、その測定はウェブ検索を通しているかと尋ねてください。答えられない、あるいは質問を嫌がるようなら、その数字はあなたが思っている意味を持ちません。物好きの技術談義ではありません - 挙がる名前の3％と100％の差です。
明日の朝、何をするか
- 自分で確かめること。客が実際に使うChatGPTやGeminiのアプリで質問してください。誰にも異議を唱えられない唯一の測定です。
- AI可視性の道具には - 私たちのものも含めて - どのエンジンが検索し、どれが記憶で答えたかを言わせること。それを言わない道具は、二つの測定を混ぜています。
- 二つの層は勝ち方が違うので、両方に取り組むこと。検索は、答える瞬間にエンジンが読む名簿と口コミで勝ちます。記憶は、次の学習が吸い上げる言及によって、時間をかけて勝ちます。
- 無料診断は60秒でアシスタントに尋ね、アカウントも要りません。昨日からは、どれが検索したかも教えます。
最後に一言。普段は書かない種類の記事だからです。測定を売る製品が正しく測れていなかったと認めるのは気持ちのいいことではなく、短期の売上にはおそらく悪い。しかし私たちが売っているのは正直な測定です。方法の訂正を隠すことは、私たちが読者に警戒するよう伝えている当の振る舞いそのものになってしまいます。方法論は公開され、日付があり、いまはこの規則が黒々と書き込まれています。