メインコンテンツへスキップ
ブログ一覧に戻る
統計・データサイエンス

ベースレート無視:CVR改善で「母数」を忘れると詰む

2026年1月21日
2分で読めます
ベースレート無視:CVR改善で「母数」を忘れると詰む

この記事の結論

「CVRが上がった」「コンバージョンが増えた」— 分母(母数)を見ないと判断が歪む。ベースレート無視で起きる典型と、分母・分子をセットで見る判断の型を整理します。

ベースレート無視:CVR改善で「母数」を忘れると詰む

30秒で要点

CVR=コンバージョン数(分子)÷ セッション数など(分母)。

「率が2倍」と言っても、分母が半分ならコンバージョン数は横ばいのことがあります。率・分子・分母の3つをセットで書く習慣が防ぎになります。

用語意味
A/Bテスト2パターンを比較するテスト
A/B2パターンを比較するテスト
CV成果。問い合わせ・資料請求・購入など、サイトで増やしたい行動

数値例

前月今月(率だけ見ると成功に見える)
CVR2%4%
セッション1,000500
CV数2020

率は2倍でも、絶対数は増えていません

報告テンプレ(1行でよい)

CVR 3%(CV 30 / セッション 1,000)

前月比では 分子・分母・率 の変化をそろえて書きます。

判断の順序

  1. 率を見たら 分母と分子 を確認
  2. 「CVR上昇=施策成功」で止めない
  3. チャネル比較は 母数の差 を並べてから

チェック(はい/いいえ)

  • [ ] 報告に分母が入っているか
  • [ ] A/Bテスト(2パターンを比較するテスト)で各群のサンプル数を見たか
  • [ ] セグメントの率だけで優劣をつけていないか