2026年10月8日にAAPORのベストプラクティス、Pew Research Centerの質問作成・モード効果資料、Statistics Canadaの非確率標本の解説を再確認した。回答は質問文と選択肢だけでなく、順序、電話・Webなどのモード、匿名性の説明、謝礼、時期、対象者の選び方、非回答の影響を受ける。架空の100人計算は回答者の割合と全利用者の割合を分けるための例にとどめ、予備調査と設計の記録なしに万能なWeb調査や抽選を主張しない。
30秒で要点
- 質問文だけでなく、誰を選び、どこで、誰に見られながら答えるかを点検します。「状況が内容より重要」と一律には言えません。
- 匿名という案内、謝礼の条件、回収時期を具体化し、回答者だけの割合を全利用者の割合と混同しないようにします。
- 下の7つの質問案と5問構成は編集上の例です。目的に合わせて予備調査し、回答しない選択も残します。
満足度は高いのに、解約や離脱は減らない。そのときは設問だけでなく、回答が集まるまでの過程も見直します。ただし、質問内容と状況のどちらが常に強く影響するかという順位は付けられません。タイトルは状況への注意喚起として読み、両方を設計することがこの記事の出発点です。
質問・回答環境・対象者の選び方を分ける
アンケートは意見や経験を知る手段です。その回答は、質問の理解、回答しやすさ、回答した人の偏りなどの影響を受けます。結果が期待と違うからといって、回答者の性格や「本音を隠した」と決めつけないでください。
AAPORの調査設計ガイドとPew Research Centerの質問作成ガイドは、質問文、順序、調査方法などを扱っています。次の表は、その論点を店舗・サービスの改善調査へ当てはめた点検例です。表が収まらない場合は、横にスクロールできます
| 点検する場所 | 見落としの例 | 記録すること |
|---|---|---|
| 質問文・選択肢 | 「便利で満足でしたか」と二つを一度に聞く | 質問全文と選択肢、試した順序 |
| 視線・関係性 | 担当スタッフが回答をその場で確認する | 誰が回答を閲覧できるか |
| 報酬 | 高評価をすると特典が増えるように見える | 対象者、条件、回答内容との関係 |
| 文脈・時期 | 説明や勧誘の直後だけに聞く | 案内文、利用からの時間、回収場所 |
| 対象者・無回答 | 満足した常連だけが答える | 対象集団、案内数、回答数、届かない人 |
視線・報酬・文脈の3点は有用な点検項目ですが、歪みの原因をすべて網羅する分類ではありません。選ばれなかった人や回答しなかった人も考える必要があります。
回収方法に、万能な順位を付けない
対面・紙・Webには、それぞれ使える条件と弱点があります。Pewの電話とWebを比較した研究では、2014年の米国の回答者を無作為に割り付け、方法による回答差を調べています。差の現れ方は設問によって異なります。この結果から、日本の店舗で手渡しが常に最悪、Webが常に正直とは言えません。
表が収まらない場合は、横にスクロールできます
| 回収方法 | 実施前の点検 | 結果を読むときの留保 |
|---|---|---|
| スタッフへの手渡し | 回答内容を接客担当に見せず回収できるか | 人前で答えにくい内容や関係性の影響を検討する |
| 投函ボックス | 記入場所、投函の動線、筆跡や日時で特定される可能性 | 箱があるだけで匿名性を保証しない |
| Web | 端末・通信・操作の負担、ログインや識別子の有無 | 回答できる人・自発的に答える人へ偏る可能性 |
「匿名」は氏名欄を消すことだけではありません。回答と顧客IDを結び付けられるなら、その扱いを説明します。担当者以外が回収する、集計だけ共有するなど、実際の運用と案内を一致させてください。
謝礼と回収時期を、測りたいことに合わせる
謝礼は参加を促す方法の一つです。クーポンが必ず批判を消す、抽選なら歪みが小さいとは断定できません。評価の高さを受取条件にせず、条件を先に説明し、負担との釣り合いと回答者の偏りを点検します。謝礼の有無を変えて比較するときも、同時に案内文や対象者まで変えれば、差の理由を切り分けにくくなります。
時期にも「直後は高評価、翌日は冷静、1週間後は印象だけ」という固定の段階はありません。次の整理は実施計画の例であり、心理効果の法則ではありません。
表が収まらない場合は、横にスクロールできます
| 知りたいこと | 回収時期の考え方 | 残す条件 |
|---|---|---|
| 手続き中の困りごと | 終了後、具体的な場面を思い出せる時点 | 接客担当の同席、待ち時間 |
| 使った後の変化 | 評価に必要な利用期間を置く | 何日・何回利用したか |
| 再利用の理由 | 再利用者だけでなく離れた人も別に調べる | 誰に案内が届いたか |
時系列で比較するなら、質問文・対象者・回収方法・時期をできるだけ揃えます。変更した条件があれば、サービス改善による変化と切り分けて記録します。
回答者の80%と、全利用者の80%は違う
架空の例として、対象の利用者100人全員に1回ずつ案内し、重複なく40人が回答したとします。40人全員が同じ満足度の二択に答え、32人が満足、8人が非満足だった場合です。
表が収まらない場合は、横にスクロールできます
| 数えたいもの | 計算 | 言えること |
|---|---|---|
| 回答した割合 | 40 ÷ 100 = 40% | この案内対象で回答が得られた割合 |
| 回答者内の満足割合 | 32 ÷ 40 = 80% | 回答者40人の内訳 |
| 対象全体で確認できた満足者 | 32 ÷ 100 = 32% | 満足と確認できた人の最低割合 |
| 未回答60人を全員満足と仮定した上限 | (32 + 60) ÷ 100 = 92% | 同じ二択で全員の結果が定まると仮定した算術上限 |
未回答60人を不満とも満足とも決め付けられません。32〜92%は、標本誤差を計算した信頼区間ではなく、未回答の取り得る結果を並べた範囲です。対象が自発的な回答者に限られる場合には、そもそも全利用者の分母が分からないこともあります。Statistics Canadaの非確率標本の解説も、探索的な利用と母集団への一般化を分けています。
改善の手がかりを集める7つの質問案
満足度のような評価質問も、目的と尺度が明確なら使えます。具体的な経験を尋ねる質問を併せ、理由を補います。以下は妥当性が検証済みの尺度ではなく、編集上の質問案です。必要なものを選び、負担と誘導を予備調査で確かめます。
- 次の選択：「次に同じことをするなら、変えたい点はありますか。なければ、そのままでも構いません」
- 比較と決め手：「他に検討した選択肢はありましたか」。あった場合に、選ぶ際に重視した点を別に聞きます。
- 利用前後：「利用前に気になったことはありましたか」。あった人に、その後どうなったかを別に聞きます。
- 代わりの手段：「このサービスを使わない場合、どうしていたと思いますか。分からない場合はそのまま教えてください」
- 価値の説明：「知人に利用経験を説明するなら、どの点を伝えますか。勧めない理由でも構いません」
- 困った場面：「途中で困ったり迷ったりした場面はありましたか」。あれば、いつ何をしようとしたかを聞きます。
- 改善候補：「変えてほしい点があれば教えてください」。その回答が出た後で、理由を聞きます。
「一番価値があった点」「不安だったこと」だけを前提にすると、価値や不安がなかった人を答えにくくします。「ない」「分からない」「回答しない」を区別して扱う設計が必要です。
最小5問の構成例を、実施前に試す
旧来の5問構成の目的を残すなら、①利用前に気になったこと、②役立った点または役立たなかった点、③困った場面、④次に変えたい点、⑤他の人へ伝える内容を候補にします。すべて自由記述にする必要はなく、分岐質問を加えると実際の設問数は増えます。5問以内なら十分という保証ではありません。
実施前に、想定する利用者に質問をどう理解したか説明してもらい、案内から回収まで小さく試します。回収後は、未回答を「該当なし」に置換せず、対象・期間・質問全文・回答数・謝礼条件と一緒に結果を残します。回答と離脱や継続の関係を考える次の段階は、アンケートを改善判断へつなぐ設計で扱っています。施策前の目的・制約・判断基準は前提設計も参照してください。