ChatGPTの答えの揺れは、問いの前提が足りているかを測る物差しになる

ChatGPTに同じ質問を三回してみてください。三回とも同じ趣旨なら、その問いは前提が足りています。三回で結論が割れたら、足りていないのはAIの性能より問いの前提であることが多いのです。この記事では、答えが揺れる理由を三つの層に分け、揺れを欠点として消すのではなく、問いの点検に使う方法を整理します。

揺れは三つの層で生まれます

一つ目は仕組みの層です。ChatGPTは、次に来る言葉の確率を計算し、その確率にもとづいて言葉を選びます。同じ入力でも選ばれる言葉の並びが変わることがあり、これを確率的な生成と呼びます。ほどよいランダム性が、毎回同じ単調な返事になるのを避けています。計算の細かな揺らぎが、出力の違いの一因になることもあります。

二つ目は設定の層で、温度と呼ばれるつまみです。温度が高いとランダム性が増して創造的だが予想しにくい答えに、低いと安定するが単調な答えになりやすくなります。ただし2025年時点で、ChatGPTの通常の画面には温度を変える設定がなく、開発者向けのAPIなどで調整するものです。

三つ目は文脈と問いの層です。ChatGPTはそれまでのやり取りを踏まえて答えるので、文脈が違えば同じ質問でも解釈や重点が変わります。人によって答えが違って見えるのは、多くの場合この層です。そもそも唯一の正解がない問いなら、複数の妥当な答え方がありえます。

揺れが困るなら温度を下げればいい、という助言をよく見かけますが、通常の画面で使っている人にとっては、窓のない部屋で窓を開けて換気しろと言われるのと同じです。つまみがない以上、利用者が動かせるのは、ほぼ三つ目の層だけです。AIは毎回言うことが違うから信用できない、と切り捨てる前に、毎回違う前提で聞いていないかを疑うほうが先です。揺れの大半が三つ目の層で起きている以上、性能を責めても揺れは減らないからです。

三回聞いて、割れ方で診断します

仕事で使う前に、同じ問いを新しい会話で三回聞き、割れ方を見ます。

割れ方	読み取れること	次の一手
言い回しだけが違う	前提は足りている。揺れは仕組みの層	そのまま使う。表現をそろえたいなら出力の形を指定する
結論は同じで、理由や重点が違う	評価基準が書かれていない	何を重視して判断してほしいかを書き足す
結論が割れる	対象か目的か制約が抜けている	誰の、何のための判断か、使えない手は何かを書き足す

判断の前提は、対象、目的、制約、評価基準の四つに分けて書き出せます。前提を渡されないAIは、手持ちの知識で空白を埋めます。空白の埋め方が毎回少しずつ違うので、答えが割れるのです。言い換えると、結論が割れるときAIは、その問いには決まっていないことがある、と三通りの答えで教えてくれています。

前提を足すと揺れは縮み、残った揺れが論点になります

前提を書き足して三回聞き直すと、たいていの揺れは縮みます。それでも割れる部分が残ったら、そこが、前提を足しても一つに決まらない、本当の論点です。たとえば新しい施策をやるべきかという問いで、目的も予算も期限も書いたのに賛否が割れるなら、その施策は前提の置き方次第で評価が変わる性質のものだということです。そこは人間が決める場所です。

一つ、この診断で分からないことも書いておきます。三回とも同じ答えが返ってきても、その答えが正しいとは限りません。揃っているのは、前提の空白の埋め方が揃っていることを示すだけで、揃って間違えることもあります。三回で足りるのか、何回聞けば十分なのかにも、決まった答えはありません。揺れは前提の点検には使えても、正しさの証明には使えないのです。

もちろん、この診断が意味を持たない場面もあります。アイデア出しや言い回しの案のように、違う答えがほしい仕事では、揺れはそのまま価値です。何度か出させて比べれば、ひとりでは出ない案が並びます。三回聞いて一つに収束させるべきなのは、答えをそのまま判断や記録に使う仕事のときだけです。

あなたが最近AIに聞いて、そのまま使った答えは、もう一度聞いても同じ結論になったでしょうか。割れたとしたら、問いに書いていなかった前提は何だったでしょうか。

この記事の背景にある考え方は、拙著『GoogleのAI NotebookLM 意思決定の強化書』の1章1節「意思決定の構造と前提の要素」に書きました。意思決定を根拠、前提、結論の三層に分け、前提を対象、目的、制約、評価基準の四つで書き出す、という節で、前提が言葉になっていないと、人もAIも手持ちの知識で空白を補ってしまうことも扱っています。そこには「前提が違えば、同じデータからでも結論は真逆になってしまいます。」とあります。この節を読むと、AIの答えが割れたとき、割れているのが答えなのか、自分が書かなかった前提なのかを、四つの要素に沿って自分で切り分けられるようになります。