第1回・第2回では、設問文・選択肢・順序に関わる①〜⑪のバイアスを見てきました。1問単位の書き方から、選択肢の並べ方、調査票全体の構成まで、「こんなところにも落とし穴があったのか」と感じていただけたところも多かったのではないでしょうか。
最終回となる今回は、⑫〜⑰の6つです。ここからは1問単位の話というより、調査全体の「分量」「調査主体の見せ方」「数値の基準」「回答者個人のクセ」「印象の波及」といった、もう一段大きな視点のバイアスになります。
実はこのあたり、設問や選択肢の作り込みにどれだけ気をつけていても、見落としがちなポイントです。逆に言えば、ここをきちんと押さえておくだけで、調査結果の質がぐっと変わってきます。最後までぜひお付き合いください。
⑫ 専門用語過多（Jargon / Technical Terms）
専門用語や抽象的な概念が多いと、回答者ごとに解釈がズレてしまう現象です。
＜悪い例＞
「ペイシェントセントリシティの観点から、本疾患に対する貴院のエンゲージメントについてどう評価しますか?」
「ペイシェントセントリシティ」「エンゲージメント」、いずれも業界内でよく使われる言葉ですが、実は明確な定義が定まっていない、非常に解釈の幅が広い言葉です。「ペイシェントセントリシティ」を、患者への説明の手厚さと捉える人もいれば、患者の声を反映するしくみと捉える人もいます。「エンゲージメント」も、診療への積極性、疾患に関する情報収集への熱心さ、患者教育への取り組みなど、何を指すかは回答者次第です。前提となる定義が回答者間で揃っていないと、同じ設問でも全く異なる基準で回答されてしまい、データの比較可能性が失われてしまいます。
＜注意点＞
専門用語を使う場合は、設問文中に簡単な定義や具体例を補足する、あるいは用語そのものを平易な言葉に置き換えることを検討しましょう。「全員が同じ前提で答えているか」を、設問を作るたびに自問する習慣をつけるとよいと思います。
⑬ 疲労バイアス（Respondent Fatigue）
調査の後半になるにつれて回答者の集中力が低下し、回答品質が落ちてしまう現象です。
＜悪い例＞
重要な設問を調査の後半に配置し、さらに自由記述の設問が連続するような構成。
回答者は調査が進むにつれて疲労し、設問文を丁寧に読まなくなる、選択肢を吟味せず適当に回答する、自由記述欄を空欄や簡略な回答で済ませる、といった行動が増えていきます。せっかく重要な設問を用意しても、後半に置いてしまうと、回答品質が落ちた状態のデータしか得られなくなってしまうのです。
この疲労は、単純な「調査の長さ」だけで決まるわけではありません。自由記述が連続する、選択肢が多い設問が続くなど、「答えにくさ」が積み重なると、回答者の負担は実際の時間以上に大きく感じられます。重要なのは時間や設問数そのものよりも、調査全体の組み立て方や答えやすさによって、回答者のモチベーションをいかに維持できるかです。
＜注意点＞
最も重要な設問はできるだけ調査の前半〜中盤に配置しましょう。自由記述設問を連続させず、選択式の設問と組み合わせて回答者の負荷を分散させることも有効です。調査全体の所要時間をあらかじめ明示し、回答者が見通しを持てるようにすることも、疲労感の軽減につながります。目安として、医師対象の調査では15分前後を超えると疲労の影響が出やすいと言われますが、これも構成次第で変わる目安に過ぎません。
⑭ アンカリング効果（Anchoring Effect）
最初に提示された数値や選択肢が「基準点（アンカー）」となり、その後の数値回答を引っ張ってしまう現象です。
＜悪い例＞
「一般に、この疾患の患者の薬物治療の実施率は80%程度と言われています。先生のご担当患者では、どの程度の割合の患者に薬物治療をされていますか」
このように設問文中で先に業界的な相場観(この場合は「薬物治療実施率80%」)を示してから自分の回答を求めると、回答者はその数値を基準点として、自分の回答をそこに近づけて答えてしまう傾向があります。実際の薬物治療率が50%程度であっても、提示された数値の影響を受けて「60〜70%程度」のように、実態より高めの回答になりやすいのです。
＜注意点＞
設問文中で先行データや一般論として数値を提示する際は、それが回答者にとっての「基準」として機能し、回答を引き寄せてしまう可能性があることを意識しましょう。可能であれば、そうした参考数値は設問文中に入れず、回答取得後の分析時に比較材料として使う方が望ましい対応です。
⑮ スポンサーバイアス（Sponsor Bias）
調査の実施主体（誰が・どの企業が調査しているか）が分かることで、回答が好意的または防御的に歪む現象です。
＜悪い例＞
調査票上には調査主体(企業名)を明記してはいないが、製品Eに関する設問が何問も連続し、かつ製品Eに特徴的な処方シーンや副作用、剤形といった質問が続く構成。
このような構成だと、回答者(医師)は設問の内容や深さから「これはA社が製品Eについて調べている調査だろう」と途中で気づいてしまいます。調査主体を明示していなくても、設問の集中度や具体性によって実質的にスポンサーが推測されてしまい、結果として「A社に配慮した回答」や「評価されているかもしれないと身構えた回答」など、実態とは異なる方向にデータが偏るリスクが生じます。
＜注意点＞
特定の製品に関する設問を不自然に連続・集中させず、競合製品も含めてバランスよく設問を配置することで、調査主体や調査意図を推測されにくい構成にすることが望ましいです。やむを得ず一製品に関する設問を厚くする必要がある場合も、設問の順序や深さを工夫し、回答者が早い段階で調査意図を察知しないよう配慮しましょう。
⑯ 極端反応傾向・中心化傾向（Extreme Response Style / Central Tendency Bias）
回答者個人の「回答のクセ」が、設問の内容とは無関係に結果を歪める現象です。
＜例＞
5段階評価（1：全く思わない 〜 5：非常にそう思う）の設問において、ある回答者は常に「1」か「5」の極端な選択肢を選び（極端反応傾向）、別の回答者は常に「3」の中央付近を選ぶ（中心化傾向）。
このクセは設問の内容や製品の実態とは無関係に生じるため、回答者の構成（極端反応をしやすい層が多い/少ない）によって、集計結果の平均値や分布が実態と異なる形に見えてしまうことがあります。
＜注意点＞
単純平均だけでなく、回答者ごとの回答パターンの分散も確認する、あるいは複数製品・複数項目への相対評価（順位付けやペア比較）を組み合わせることで、個人のクセの影響を抑えやすくなります。サンプルサイズが十分であれば、この影響はある程度平均化されますが、設計段階で意識しておく価値はあります。
⑰ ハロー効果（Halo Effect）
ある側面への強い印象が、本来無関係な他の評価項目にまで影響を及ぼす現象です。
＜例＞
「MR(営業担当者)の対応への満足度」を最初に尋ねた直後に、「A社という企業に対する評価」を尋ねる構成。MRの印象が良いと、企業そのものへの評価まで実態以上に高く回答されやすくなります。
医療用医薬品マーケティングリサーチでは、MRの印象・既存の処方実績への満足感などが、本来別軸であるはずの企業評価や製品評価(有効性・安全性・使用感など)に染み出してしまうことが、よくあります。
＜注意点＞
評価対象を明確に分離して尋ねること、印象が強く出やすい設問(MRの対応など)は、企業評価や製品自体の評価設問から離して配置することが基本です。②キャリーオーバー効果・⑨順序バイアスとも関連するため、調査票全体の設問配置を見直す際にあわせて検討すると効果的です。
基本17項目の調査票バイアス
まとめ
3回にわたって、設問単位の小さな工夫から、調査票全体の構成にいたるまで、合計17個のバイアスを紹介してきました。改めて並べてみると、「これ、自分も無意識にやっていたかも」と感じるものがいくつかあったのではないでしょうか。
調査票が完成したら、ぜひ一度、回答者の立場になったつもりで読み返してみてください。
• 1問1コンセプトになっているか
• 前後の設問・選択肢が回答に影響を与えていないか
• 選択肢はMECEで、数は適切か
• 専門用語の前提は揃っているか
• 数値の基準提示(選択肢の粒度)は適切か
• 調査主体の開示・非開示は適切に設計されているか
• 調査全体の分量・順序は回答者の負荷を考慮しているか
この一手間が、データの質を大きく左右します。
ただ、自分で読み返すだけでは、どうしても限界があります。設問を作った本人は、その設問に込めた意図や前提を知っているため、無意識のうちに「わかりやすいはず」「誘導していないはず」と思い込んでしまいがちです。
だからこそ、設計に関わっていない第三者の目を通すことは更に重要です。第三者であれば、回答者と同じような感覚で設問に向き合い、自分では気づけなかった違和感を指摘してくれます。社内の別チームのメンバーでも、調査票だけを見て率直な感想をもらうだけでも十分効果があります。
このシリーズ開始の際に冒頭で「調査票が命」とお伝えしましたが、これは大げさな表現ではなく、調査結果の説得力そのものを左右する話だと、改めて感じています。
次に調査票を設計する際は、この17項目を手元のチェックリストとして、ぜひ活用してみてください。そして可能であれば、自分の目だけで完結させず、誰かに一度読んでもらう機会も作ってみてください。
全3回のシリーズにお付き合いいただきありがとうございました！