2026年10月8日に米国国勢調査局の質問票評価、データ品質、回答率、項目欠測の現行資料を再確認した。満足度は回答時点の測定で、継続や離脱とは別の結果であるため、認知インタビュー・行動コーディング・パイロット・非回答分析で質問を事前に確かめ、回答率と項目欠測を分母・対象・期間つきで記録する。同意の範囲で回答と利用ログを結び、変更前後の主要指標、副作用、非回答、測定変更を小さな検証で確認する。
30秒で要点
満足度は、回答した瞬間の評価を表す一つの信号です。継続や離脱は、その後の行動と運用上の摩擦で決まることがあります。質問票を改善装置にするには、質問の意味を事前に確かめ、非回答・欠測を記録し、同意の範囲で行動指標とつなぎます。
- 満足度、継続、離脱を同じ指標として扱わない
- 質問文・選択肢・順序・対象を小さく事前検証する
- 回答率だけでなく、非回答と項目欠測の偏りを確認する
- 回答と行動ログを、目的・期間・同意・アクセス権つきで対応付ける
- 改善実験では主要指標と副作用、停止条件を先に決める
1. 満足度と継続を別の問いにする
「満足していますか」と「次も使いましたか」は違う時間と対象を持つ問いです。利用者がサービスを好意的に評価していても、予約、ログイン、支払い、移動、社内承認などの摩擦で離脱することがあります。逆に、不満があっても契約や代替手段の不足で継続することもあります。
したがって、質問票の目的を「気分を測る」「摩擦の場所を探す」「次の行動を予測する」のどれかに分けます。複数の目的を一問へ詰め込まず、回答時点と追跡期間を設計します。
2. Censusの質問票評価を小さく使う
米国国勢調査局の質問票評価基準は、認知インタビュー、分割パネル、行動コーディング、非回答分析など、質問票を実査前に評価する方法を整理しています。すべてを実施する必要はありませんが、質問の解釈と回答行動を事前に観察する発想は、社内調査にも使えます。表が収まらない場合は、横にスクロールできます
| 方法 | 見ること | 残す記録 |
|---|---|---|
| 認知インタビュー | 質問をどう理解したか | 解釈の違い、迷い |
| 行動コーディング | 読む、戻る、選び直す動き | 項目ごとの負荷 |
| 分割パネル | 文言・順序の違い | 条件と差の幅 |
| 非回答分析 | 誰が答えなかったか | 対象・期間・欠測 |
事前テストの人数や差は、実績として一般化しません。調査票を直すための探索であり、変更した項目と判断理由を版管理します。
3. 回答率と偏りを分ける
非標本誤差の基準は、カバレッジ、非回答、測定、処理などを分けて確認します。回答率が高くても、特定の利用者が質問へ答えにくければ、推定に偏りが残ります。逆に回答率だけを上げる報酬が、回答の質や自発性を損なうこともあります。表が収まらない場合は、横にスクロールできます
| 確認 | 質問 |
|---|---|
| 対象 | 誰へ配布し、誰が対象外か |
| 非回答 | 未回答者は利用頻度・契約・地域で違うか |
| 項目欠測 | どの質問を飛ばし、分母は変わったか |
| 測定 | 文言、選択肢、順序、表示は同じか |
| 時点 | 障害、キャンペーン、契約更新の前後か |
4. 回答を行動へ安全につなぐ
「満足度4以上の人は再訪したか」を見るなら、回答IDと行動ログを対応付けるキー、観察期間、欠測、アクセス権を先に決めます。個人を不必要に追跡せず、少人数セルの表示を抑え、目的外の評価や人事利用へ転用しない範囲を明示します。
表が収まらない場合は、横にスクロールできます
| 層 | 例 | 注意点 |
|---|---|---|
| 回答 | 満足度、理由、自由記述 | 設問・分母・未回答 |
| 行動 | 再訪、完了、エラー、問い合わせ | 期間・測定変更 |
| 接続 | 匿名化ID、コホート | 同意・権限・小セル |
| 判断 | 仮説、実験、停止 | 相関を因果としない |
自由記述の言葉を、そのまま全利用者の割合へ変換しません。言葉から摩擦の仮説を作り、ログの頻度や時系列で確かめ、必要なら追加質問へ戻ります。
5. 小さな改善実験を設計する
合成ケースとして、満足度は高いのに予約完了後の再訪が減ったサービスを考えます。回答で「予約が面倒」という声を分類し、予約画面の導線を一部の対象へ変更します。主要指標を再訪率、副作用を誤予約・問い合わせ・特定群の完了時間とし、期間、対象、停止条件を先に固定します。この数値は実在の調査結果ではありません。
表が収まらない場合は、横にスクロールできます
| 設計欄 | 記録例 |
|---|---|
| 仮説 | 予約手順の摩擦が再訪を妨げる |
| 変更 | 入力項目と確認導線を限定的に見直す |
| 主要指標 | 対象期間内の再訪または予約完了 |
| 副作用 | 誤入力、問い合わせ、特定群の負担 |
| 再測定 | 変更前後の対象・期間・分母を固定 |
改善幅が見えても、季節、顧客構成、計測コード、回答者構成が変わっていないかを確認します。よい結果だけを切り出さず、未回答と品質指標も同じ報告へ残します。
6. よくある失敗
- 満足度を継続率や売上の代理として無条件に使う
- 回答率だけを上げ、非回答者や項目欠測を調べない
- 設問文・順序・対象を変えた結果を同じ時系列で比較する
- 自由記述の少数意見を全利用者の割合や原因と断定する
- 同意・権限・小セルの保護を置かずに回答と個人ログを接続する
7. 満足度の高さを結論にしない
アンケートを改善へ使うには、質問の意味を検証し、非回答と欠測を分け、回答と行動を目的・同意・期間つきで接続します。満足度の高さを結論にせず、行動・品質・副作用を含む小さな実験へ戻します。
調査の状況依存性はアンケートは状況で歪む、少数データの読み方は小規模データ分析ガイドも参照してください。