ベースレート無視：CVR改善で「母数」を忘れると詰む
ありがちな言い回し：「CVRが2倍になった。施策は大成功だ。」「コンバージョン数が増えた。このまま拡大しよう。」
現場では、率（CVR）や分子（コンバージョン数）だけを見て判断し、分母（母数・セッション数・ユーザー数）がどう変わったかを忘れることがあります。分母が減っていれば、率が上がっても絶対数は減っているかもしれません。これをベースレート無視といい、施策評価と予算判断を誤らせます。
この記事の仮説：「率」や「数」を見るとき、必ず分母（母数）をセットで見る習慣があると、CVR改善・施策評価の判断が壊れにくくなる。
この記事が想定する読者：CVR・コンバージョン数で施策評価をするが、「率が上がった」だけで判断しがちな方。分母（母数）をセットで見る型にしたい担当者。
判断を誤るとどうなるか：率や分子だけ見ると、分母が減っていても「改善」と誤認し、施策評価と予算判断が歪む。率・分子・分母の3つをセットで書き、前月・前週比較では分母の変化を必ず確認すると壊れにくくなります。
この記事でわかること
- ベースレート無視とは何か（定義と「母数」の関係）
- なぜ「CVRが上がった」だけでは判断が危険か（数値例つき）
- 率・分母・分子をどうセットで見るか
- 施策評価で、何を確認してから判断するか（テンプレ）
1. ありがちな誤解（現場で起きる言い回し）
- 「CVRが上がった。施策は効いている。」
- 「コンバージョン数が先月より増えた。拡大しよう。」
- 「率が2倍になった。この変更は採用だ。」
- 「CV数が目標を超えた。問題ない。」
いずれも、分母（母数）がどう変わったかを確認せずに判断している可能性があります。母数が半分になっていれば、CVRが2倍でもコンバージョン数は横ばい。母数が減っていれば、CV数が増えても率は上がっているが、全体の成果は減っていることがある。
2. 何が間違いか（直感と数式のズレ）
ベースレート無視とは
ベースレートとは、基準となる割合や母集団の大きさのことです。統計・意思決定の文脈では、「率を解釈するときの土台（分母・母数）」を指します。ベースレート無視は、この分母・母数を無視して、率や分子（コンバージョン数など）だけを見て判断してしまうことです。
- 率（CVR）＝ 分子（コンバージョン数）／ 分母（セッション数やユーザー数）。分母が変わると、率だけ見ても意味が変わる。
- 分子だけ見る：「CV数が増えた」→ 分母が大きく増えていれば、率は下がっているかもしれない。逆に分母が減っていれば、率が上がってもCV数は減っているかもしれない。
- 率だけ見る：「CVRが2倍になった」→ 分母が半分になっていれば、CV数は横ばい。施策で「厳しい条件のユーザーだけ」が残っていると、率は上がるが母数が減り、売上や問い合わせ総数は伸びないことがある。
具体例（数字で考える）：前月は「CVR 2%、セッション 1,000、コンバージョン 20件」。今月は「CVR 4%、セッション 500、コンバージョン 20件」だったとします。率だけ見ると「CVRが2倍になった。施策は成功」と判断しがちです。しかし分母（セッション数）が半分になっているため、コンバージョン数は20件のままです。売上や問い合わせの絶対数は増えていません。率の上昇は「母数が減ったことによる見かけの改善」の可能性があり、分母をセットで見ないと誤判断します。
なぜ判断が壊れるか
- 施策の効果を過大評価する。CVR上昇が「母数減少（厳しい条件の人が残った）」による見かけの上昇だと気づかない。
- 予算・人員の判断を誤る。「CV数が増えた」と見えて、実は母数が増えただけで率は横ばい、ということもある。
- チャネル比較で、母数が違うチャネルの「率」だけを比べて、優先順位を誤る。
どこで起きやすいか
- CVR・コンバージョン数・問い合わせ数の報告で、分母を書かない・見ないとき。
- A/Bテストで母数（サンプル数）を確認せずに「勝ち」と判断するとき。サンプルサイズの罠とも接続する。
- セグメント別の率だけを見て、各セグメントの母数が小さくてばらつきが大きいのに気づかないとき。
3. 何をすれば良いか（判断基準・必要データ・見方）
分母（母数）と分子をセットで見る
- 率を報告するとき：必ず分母と分子の両方を書く。例：「CVR 3%（CV 30 / セッション 1,000）」。
- 「CVRが上がった」と言うとき：前との比較で、分母・分子がそれぞれどう変わったかを確認する。分母が減ったのか・分子が増えたのかを分けて見る。
- コンバージョン数が増えたとき：母数（セッション数・ユーザー数）も増えているか確認する。母数が増えて率が横ばいなら「スケールで増えた」、母数が減って率が上がってCV数が横ばいなら「母数減少による見かけの改善」の可能性がある。
判断の順序
- 率を見たら、必ず分母と分子を確認する。
- 前月・前週との比較では、分母・分子の両方の変化を書く。
- 施策の効果を言うときは、「分母がどう変わったか」を明示する。分母が減る施策（絞り込み・条件付き表示）なら、率上昇と母数減少はセットで解釈する。
避けること
- 「CVRが上がった＝成功」で止めない：分母が減っていないか確認する。
- 「CV数が増えた＝拡大してよい」で止めない：母数が増えただけか、率も上がっているかを確認する。
- 率だけの比較：母数が大きく違うチャネル・セグメントで、率だけを並べて優劣をつけない。絶対数や母数を並べてから判断する。
4. 最小検証テンプレ（誰でも再現できる）
1つだけやるなら：率（CVR・CTR等）を書くとき、必ず分母と分子を1行でよいので書く。例：「CVR 3%（30 CV / 1,000 セッション）」。
テンプレ例（判断ログ用）
- 指標：［ 例：CVR ］
- 分子：［ 例：コンバージョン数 30 ］
- 分母：［ 例：セッション数 1,000 ］
- 率：［ 3% ］
- 前回比：分子［ ］、分母［ ］、率［ ］
- 判断：［ 母数も見た上で、施策効果は〇〇 ］
よくある質問（FAQ）
ベースレートと「母数」「分母」は同じ意味ですか？
この記事では、ベースレートを「率を解釈するときの基準＝分母・母集団の大きさ」として使っています。CVRなら分母はセッション数やユーザー数、CTRなら表示回数などです。率を報告するときは、必ずこの分母（母数）をセットで書く習慣にすると、ベースレート無視を防げます。
率だけ見ていいケースはありますか？
分母が一定で、比較対象どうしで母数が同じときは、率だけの比較でも大きな誤りになりにくいです。ただし「CVRが上がった」「コンバージョン数が増えた」と前月・前週と比較するときは、分母がどう変わったかを必ず確認することを推奨します。A/Bテストでも、各群の母数（サンプル数）を確認せずに率だけ比較すると、サンプルサイズの罠と重なります。
CVRが上がって、コンバージョン数も増えた場合は成功と判断してよいですか？
分母（セッション数・ユーザー数）の変化を確認してから判断することを推奨します。母数が増えて率が横ばいなら「スケールで増えた」、母数が増えて率も上がっているなら「率と絶対数の両方で改善」と解釈できます。いずれにせよ「率・分子・分母」の3つをセットで書くと、後から見ても判断の根拠が残ります。
本記事はベースレート無視とCVR解釈（分母・率の見方・判断の型）に特化しています。実際の数値の解釈は母集団・計測設計により異なるため、統計で判断を壊さない・サンプルサイズの罠・CROの進め方とあわせて自社の前提に合わせた判断をおすすめします。
判断の土台として押さえておくこと
- 率や数を報告・判断するときは分母（母数）を必ずセットで書く：CVRなら分母はセッション数・ユーザー数。分母が変わっていれば率の解釈が変わる。
- 「CVRが上がった」だけでは成功と判断しない：分母の変化を確認し、率・分子・分母の3つをセットで見る。
- 次の一手：現場で壊れる統計ミス一覧は統計で判断を壊さない（検証の型）、サンプルサイズはサンプルサイズ・A/Bテストの罠、平均の罠は平均の罠、検証の型はCROの進め方を参照する。
関連記事
- 統計で判断を壊さない（検証の型） — 現場で壊れる統計ミス一覧
- サンプルサイズ・A/Bテストの罠 — 母数と有意差
- 平均の罠：中央値・分布を見ないと判断が壊れる — 率と分布
- p値の誤解：有意差が出ても売上が増えない理由 — 効果量と母数
- CROの進め方｜何から検証するべきか