アンケート質問の偏りを見つけて直す方法。
偏りの確認では、質問が悪いと判定するだけでなく問題を説明します。思い込み、誘導的な表現、一度に二つを尋ねる質問を探します。
作業手順をタスクに合わせましょう。
前提、感情的な言葉、回答の選択肢、異なる概念を組み合わせた質問を確認します。想定される解釈の問題を説明し、本来の対象を測れる中立的な代案を示します。
- 用意するもの
- 質問票と調査目的。
- 得られるもの
- 誘導的な質問、二重質問、曖昧な質問と修正案。
入力と結果を確認しましょう。
説明用の入力と出力 · 実際の WebAct 実行ではない学習用サンプル
入力項目サンプル個
Review this survey question: How helpful and easy was our excellent support service? Produce separate neutral questions with response options.
完成例
Issue: excellent suggests a positive answer, while helpfulness and ease are different concepts. Question 1: How helpful was the support you received? Options: not at all, slightly, moderately, very, extremely; not applicable. Question 2: How easy was it to obtain the support you needed? Options: very difficult, difficult, neither, easy, very easy; not applicable.
この入力をプロンプトに読み込み、WebAct にコピーして試してください。結果は掲載例と異なる場合があります。
判断のポイントとトラブル対処。
肯定的な形容詞は常に不適切ですか？
期待する答えを示唆したり評価を前提にしたりする場合に問題です。その評価を測るときは中立的な表現を使います。
誘導的な単語を一つ削っても直らないのはなぜですか？
前提や二重質問の構造が残っていないか確認します。回答者に何を受け入れさせる質問なのかによっても偏りは生じます。
自分の資料で試しましょう。
タスクのプロンプト内の例を自分の資料に置き換えてください。必要な要件を残し、タスクを WebAct にコピーします。
タスクを調整してコピー ↑