ベースレート無視:CVR改善で「母数」を忘れると詰む
30秒で要点
CVR=コンバージョン数(分子)÷ セッション数など(分母)。
「率が2倍」と言っても、分母が半分ならコンバージョン数は横ばいのことがあります。率・分子・分母の3つをセットで書く習慣が防ぎになります。
| 用語 | 意味 |
|---|---|
| A/Bテスト | 2パターンを比較するテスト |
| A/B | 2パターンを比較するテスト |
| CV | 成果。問い合わせ・資料請求・購入など、サイトで増やしたい行動 |
数値例
| 前月 | 今月(率だけ見ると成功に見える) | |
|---|---|---|
| CVR | 2% | 4% |
| セッション | 1,000 | 500 |
| CV数 | 20 | 20 |
率は2倍でも、絶対数は増えていません。
報告テンプレ(1行でよい)
CVR 3%(CV 30 / セッション 1,000)
前月比では 分子・分母・率 の変化をそろえて書きます。
判断の順序
- 率を見たら 分母と分子 を確認
- 「CVR上昇=施策成功」で止めない
- チャネル比較は 母数の差 を並べてから
チェック(はい/いいえ)
- [ ] 報告に分母が入っているか
- [ ] A/Bテスト(2パターンを比較するテスト)で各群のサンプル数を見たか
- [ ] セグメントの率だけで優劣をつけていないか