プロは会議資料の「発見」をこう見る：「北陸の火曜だけ売上が高い」表の裏で、切り口は20通り試されていた

営業会議の資料に、ピボットテーブルが一枚載った。

地域と曜日で切った表だ。北陸の火曜だけ、売上が突き出ていた。

担当者は、火曜に北陸で販促をかける案を出した。

表の裏で、集計した人は切り口を20通り試していた。

資料に載ったのは、20通りのうちの一枚だけだった。

突き出た一枚は、本物の発見なのか。

切り口を20通り試すと、6割で何かが突き出る

どんなデータにも、偶然の偏りがある。

5%の確率で起きる偏りを、基準に置く。

互いに独立した切り口を20通り試すと、一つ以上が偶然に基準を超える確率は6割を超える。

計算は単純だ。20通りすべてで外れる確率は、0.95の20乗で約36%。

残りの約64%で、一つ以上が基準を超える。

何も起きていないデータでも、20通り切れば、突き出た一枚が見つかるほうが普通なのだ。

北陸の火曜が偶然の偏りなら、会社は偶然に向かって販促の予算を使うことになる。

ピボットテーブルの正体は、望む結論が出るまで切り直せる道具だ

冒頭の資料の表は、地域を行に、曜日を列に置いた一枚だった。

曜日を月に替えれば、別の表がすぐにできる。

ピボットテーブル（Pivot Table）は、大量のデータを集計する道具だ。

行と列に置く項目を、ドラッグで何度でも入れ替えられる。

Excelには、1993年のバージョン5.0で入った。

行、列、値、フィルターの四つの領域に、ドラッグで項目を置いて組み立てる。

カラクリは単純だ。切り口を変えるたびに、偶然の偏りを拾う機会が増える。

ピボットテーブルは、望む結論が出るまで切り直せる道具である。

クロス集計は、二つの変数の関係を表で示す考え方だ。

カイ二乗検定などの、確かめる手順と結びついている。

ピボットテーブルは、切り口を何度も試せるようにした道具である。

ピボットで探し、クロス集計で確かめる。二つを組み合わせる使い方が基本だ。

切り口を試した回数は、資料の外に残る

20回くじを引いて、当たりの1枚だけを見せる場面を思い浮かべてほしい。

見る側には、当たりが珍しいのか、ありふれているのか分からない。

引いた回数は、資料の外に残る。

冒頭の会議も、同じ形だった。出席者が見たのは、突き出た一枚だけである。

試した切り口の数が分からなければ、発見の珍しさは見積もれない。

だから、試した切り口の数は記録に残す。数が分かれば、発見の珍しさを後から見積もれる。

北陸の火曜は、次の四半期で確かめる

偶然と本物は、探索に使ったものとは別のデータで見分ける。別の期間のデータも使える。

冒頭の会議の表は、ある四半期のデータで作った一枚だった。

確かめには、次の四半期のデータを使う。

次の四半期でも北陸の火曜が突き出ていれば、偏りが偶然の外にある見込みは高まる。

次の四半期の表が平らなら、20通りの中で拾った偶然の偏りである。

販促の案は、次の四半期の表を見てから出す。

資料には、試した切り口の数を書き添える。

「20通りのうちの一枚」と書けば、会議の参加者が発見の珍しさを見積もれる。

切り口の数は、集計する人が自分の手元で記録する。

AIに確かめを頼むときは、次の文面のかっこの中を書き換えて使える。

添付したデータは（例：次の四半期の、地域別と曜日別の売上）です。探索に使った期間とは別の期間です。
確かめたい偏り：（例：北陸の火曜だけ、売上が高い）
1. 地域と曜日で、売上の合計を表にしてください。
2. （例：北陸の火曜）の売上が、探索のときと同じ向きに偏っているかを示してください。
3. 偏りが偶然の範囲かを、件数に合った検定で確かめてください。

会議に出すべきだった、試した切り口の数の一行

北陸の火曜の販促案は、次の四半期にも偏りが続くと分かってから出せばよい。

会議に出すべきだったのは、突き出た一枚ではない。「20通りのうちの一枚」という一行だった。

この記事の考え方は、拙著『ChatGPTではじめるAI株式投資』の6章4節「ポートフォリオを育てる」に書きました。この節を読むと、保有の集計を眺める前に、何を偏りとみなすかの基準を書き、その基準で自分を点検できるようになります。