ChatGPTに自社名を聞いて、名前が出るか確かめる。この確認は、そのままでは判断材料になりません。AIの回答は同じ質問でも毎回変わるからです。出た日も出ない日もある中で、自社の露出は何を見て判断すればいいのか。確認が当てにならない理由と、代わりに何を判断材料にするかを整理します。
この記事のまとめ#
- ChatGPTに自社名を聞いて出るか確かめる方法は、同じ質問でも回答が変わるため、1回の結果では判断できません
- 揺れるのは出るか出ないかだけではありません。実在しない評判を根拠に挙げるなど、返ってきた内容そのものが事実と違うこともあります
- 出力を固定する設定にしてもなお回答は揃わないと研究が報告しています。正解率のばらつきは最大15%、同じ問題でも回によって当たり外れが入れ替わる幅は最大70%（どちらも上限の値）
- 何度も聞いて回数を数える方法は、おおよその手応えをつかむ補助まで。調査の手間が1社に見合わず、測っているのはAI側の印象で、自社サイトへの流入とは結びついていません
- 判断材料にするのは、聞いた瞬間の回答でなく、自社サイトに積み上がる記録です。AI経由で来たか、どのページに着地したか、買ったか
1. 1回聞いた結果で判断すると何を間違えるか#
1回の結果で判断すると、安心する側にも焦る側にも、同じだけ間違えます。昨日は自社名が出たのに今日は出てこない。逆に、ずっと出なかったのに急に出る。GEOに手をつけ始めた運営者なら、たいてい一度は経験します。
出た日と出ない日の両方で判断を誤る#
出た場合、そこで確認を終えてしまいます。実際には、その1回でたまたま候補に入っただけかもしれません。翌週に同じ質問を投げたら消えている。これは珍しいことではありません。
出なかった場合、問題はさらに大きくなります。1回選ばれなかっただけで、記事の書き直しや構造化データの追加といった投資判断を始めてしまう。打ち手そのものは正しくても、着手の理由になった観測が当てになりません。しかも効果の答え合わせを同じ確認方法でやるので、直したあとに出たとして、それが打ち手の成果なのか、ただの揺れなのかを分けられません。
揺れているのは可否だけではない#
見落とされやすいことがもう1つあります。変わるのは出るか出ないかだけでなく、返ってきた文章の中身もです。
AIは、実在しない評判を根拠として挙げることがあります。自社サイトについて尋ねたら悪評を根拠に断じられ、その出典をたどると自社と無関係のページだった、という形です。極端な例ですが、確認して返ってきた文章がその場で組み立てられた1つの出力であって、固定された記録ではないことを、はっきり示しています。
測り方の全体像はAIブランド可視性の測り方｜中小ECの現在地を実データで押さえるにまとめています。その手前にあるのが、多くの人が最初にやる1回の確認は、なぜ判断材料にならないのかという問題です。
2. なぜ答えは毎回変わるのか#
同じ質問を続けて2回投げると、返ってくる文章は別物になります。AIの回答は毎回その場で組み立て直されているからで、不具合ではありません。
言葉を1つずつ確率で選んでいる#
AIは、できあがった文章をどこかから取り出しているのではありません。「この続きに来そうな言葉」の候補を出して、その中から1つを選ぶ。これを最後まで繰り返して文章にします。候補の選び方にわずかでも幅があれば、書き出しのひと言が変わり、そこから先の展開もつられて変わります。ECサイトを推薦する文脈で、自社名が入るはずだった位置に別の会社名が入る。仕組みの上では、ごく起こりやすいことです。ChatGPTのように答える前にウェブを検索するサービスなら[2]、参照するページ自体もそのときどきで変わります。
出力を固定する設定でも揃わない#
揺れを抑える設定にすれば同じ答えが返る、と考えたくなります。ここは実際に測られています。出力を固定するはずの設定にしたうえで、5つのモデルに8種類の課題を10回ずつ解かせた研究では、それでも回答は揃いませんでした[1]。正解率のばらつきは最大で15%。さらに、10回のうち1回でも正解できた問題をすべて正解と数えた場合と、1回でも間違えた問題をすべて不正解と数えた場合とでは、開きが最大で70%に達しています。
この2つの数値は上限であって、平均でも真ん中の値でもありません。ばらつきの幅は課題によって大きく違い、多くはこれより小さく収まります。重要なのは数値の大きさより、固定するはずの設定でも完全には固定できなかったという事実です（この研究は査読前に公開された論文です）。
出力が揺れること自体は、AIを日常的に扱う人たちの間でよく知られています。知られていないのは、その揺れが「自社が出るか確かめる」という日常の作業をどこまで無効にするかです。引用されやすい記事の条件そのものは【研究報告】AIに引用される2大条件｜数十万件の調査が示すで扱っています。
3. では自社の露出は何で判断するか#
判断の土台は、聞いた瞬間の回答ではなく、自社サイトに積み上がっていく記録に置きます。前者は毎回書き換わり、後者は後から変わりません。
その場の回答と、積み上がる記録#
AIに聞いて返ってきた回答は、その瞬間を写した1枚です。同じ質問でも次の回答は別物になるため、1回の回答から月単位の傾向は出てきません。
自社サイト側に残るのは連続した記録です。AIの回答からリンクをたどって誰かが来た、どのページに着地した、読んで帰った、あるいは買った。これらは日付つきで積み上がり、後から書き換わりません。先週の訪問がなかったことになる、ということは起きない。判断の起点にできるのは、こちらです。
何度も聞く方法は、どこまで使えるか#
では何度も聞いて、出た回数を数えるのはどうか。この方法自体を否定はしません。10回聞いて2回だったのが8回になった、という数え方で手応えを確かめている実務者もいます。ただ、得られるのはおおよその手応えをつかむ補助までで、そこには限界が2つあります。
1つは手間です。1つの検索キーワードで意味のある回数を回し、それを主要な検索キーワードの分だけ、毎月続ける。この調査設計は、専門の調査会社が市場全体の傾向を出すために組むものです。1社が自社の現在地を知るためだけに負担するには、コストが釣り合いません（市場全体の露出量なら大規模調査で測れます）。
もう1つは、より本質的です。何回回しても、測っているのはAI側の印象であって、自社サイトへの流入とは結びついていません。回答に名前が載っていても、今月のAI経由の訪問はゼロかもしれない。逆に、回答では見かけないのに流入は来ている場合もあります。回数を増やしても、両者は結びつきません。
出すための打ち手は、この記事では扱わない#
この記事は「どうすれば出るか」の対策に踏み込みません。Googleは、AI機能に出るための特別な要件はないと案内しています[3]。構造化データや記事の書き方といった打ち手はChatGPTの回答に自社を出すには｜AIに引用される土台をつくるにまとめました。言いたいのは、その打ち手を選ぶ判断も、効いたかどうかの答え合わせも、1回の確認に載せてはいけないということだけです。引用されてもクリックが来ない記事の見方は0クリックでもChatGPTが選ぶ記事｜消す前に見る数字で扱っています。
RevenueScopeの解決策
AI別のリファラ判定とbot除外を保ったまま毎月同じ形で集計し直す作業は、手組みでは続きません。RevenueScopeは、AI経由の流入を連続した記録として保存します。ChatGPT、Claude、Perplexity、Gemini、Copilotのどれを経由して来たセッションかをAI別に分類し、着地したページと、そのページで立った売上（着地売上=入口ページ帰属）を返します。あわせて、そのページが最後にAI経由の訪問を受けた日付も返します。確認するたびに書き換わる回答ではなく、自社サイトに残った記録を判断材料にできます。AIアシスタントが参照元を渡さない訪問は数に入りません。これは計測する側に共通する下限で、その下限のうえで実際に届いた流入を数えます。
RSにMCP経由でAIアシスタントに聞くとこう返る#
「AI経由の流入を、AIアシスタント別に出して」と尋ねると、次のような形で返ってきます。
| AIアシスタント | セッション比率 | 着地売上の比率 | 最終流入日 |
|---|---|---|---|
| ChatGPT | 28.3% | 0% | 2026-07-12 |
| Perplexity | 26.4% | 0% | 2026-07-14 |
| Gemini | 18.9% | 48.2% | 2026-07-10 |
| Claude | 17.0% | 38.6% | 2026-07-14 |
| Copilot | 9.4% | 13.2% | 2026-07-12 |
※ 一事例（イメージ・直近30日）
この事例でまず見てほしいのは、右端の最終流入日です。日付が入っていれば、先月まで来ていた流入が止まったのか、もともと来ていないのかを分けられます。1回の確認で分かるのは「今日は出なかった」までですが、記録が残っていれば、いつから変わったのかを後からさかのぼれます。記事を直した日と突き合わせれば、打ち手の効果もここで確かめられます。
セッションを多く運ぶAIと、売上につながるAIが一致しないこと自体は、珍しくありません。この現象を見本ECの実測で扱ったのが中小ECのAI可視性の測り方です。
FAQ#
よくある質問#
Q. 聞くたびに違う答えが返るのは、こちらの聞き方が悪いからですか？
A. 聞き方の問題ではありません。同じ文面を同じ日に投げても、返ってくる文章は変わります。回答はどこかに保存された答えを取り出しているのではなく、その都度1語ずつ選び直して組み立てられているからです。質問を具体的にすれば回答の方向はある程度そろいますが、毎回同じ結果になるところまでは行きません。
Q. 出力を固定する設定にすれば、同じ答えが返りますか？
A. 完全には固定されません。固定するはずの設定にしたうえで測った研究でも、回答は揃いませんでした[1]。加えて、ChatGPTのような一般向けのサービスでは、利用者側でその設定を触れません。検索を伴う回答なら、参照するページ自体もその都度変わります。
Q. AIが自社について事実と違うことを書いていたら、どうすればいいですか？
A. まず、その内容が毎回出るのか、その回だけだったのかを分けてください。1回だけなら、次の生成では消えている可能性が高い。何度聞いても同じ誤りが返るなら、参照元になっているページ側に原因があることが多く、自社サイトの記述を正しく明示するほうが効果的です。
Q. 昨日は出たのに今日は出ないのは、順位が下がったということですか？
A. 1回ずつの結果からは判断できません。AIの回答に検索結果のような固定の順位はなく、出るか出ないかは毎回その場で決まります。下がったかどうかを見るなら、AI経由の流入が日付ごとにどれだけ来ていたかを並べて、水準そのものが落ちたかを確かめてください。1日分の出た・出ないは、そのまま順位の上下には読み替えられません。
まとめ#
露出を判断する手順は、3つに整理できます。1つ目は、ChatGPTに自社名を聞いて出るか確かめる作業を、判定から外すこと。回答は毎回その場で選び直されているので、出た日も出ない日も、その1回から読み取れることはありません。揺れるのは可否だけでなく、返ってきた内容そのものにも及びます。出力を固定する設定にしてもなお回答が揃わないことは、研究でも測られています[1]。
2つ目は、回数を数える方法の位置づけを決めること。10回中何回出たかは、おおよその手応えとしては使えます。ただし調査の手間が1社には見合わず、測っているのはAI側の印象で、自社サイトへの流入とは結びついていません。補助にとどめて、判定には使わない。
3つ目は、判定をAI経由の流入記録で行うこと。AI別に何セッション来たか、どのページに着地したか、そこから売上が立ったか、最後に流入があったのはいつか。この4つが日付つきで並んでいれば、記事を直した前後で何が動いたかを後から確かめられます。1回の確認では、そのどれも残りません。
どの広告が売上を生んでいるか、一目でわかる
月5,000セッションまで、AIアナリストもずっと無料。クレジットカード不要。最短5分で導入。
