← 学習メニュー
CCAR-P 練習問題 32
CCAR-P
営業メールの下書きを評価するために「役に立つかどうか」を指標にしたところ、評価者によって点数が大きくばらつき、プロンプトの改善の効果を判断できませんでした。指標の改善として最も適切なのはどれですか。
スポンサーリンク
選択肢を押して回答
正解と解説
正解：D
判断のポイント
評価の基準は、具体的で観察できる観点のルーブリックにし、採点例を添えて、評価者の間のばらつきを抑えます。
A. 評価者を増やして平均を取る（不正解）
人数を増やしても、基準が曖昧なままでは評価の意味がそろいません。
B. 「役に立つ」の点数を10段階から3段階に減らして判断を簡単にする（不正解）
段階を減らしても、何を基準に判断するかは曖昧なままです。
C. 役に立つかどうかの評価はやめ、メールの文字数だけを指標にする（不正解）
測りやすくても、品質を反映しない指標になります。
D. 具体的な観点のルーブリックにし、採点例を添える（正解）
曖昧な指標は、具体的で観察できる観点に分解し、採点の例を添えると、評価者の間のばらつきが減ります。
出題範囲：CCAR-P 分野4「評価・テスト・最適化」・項目4.1 評価指標（正確さ・遅延・費用・安全性・セキュリティ）
参考資料（公式ドキュメント）
公開資料をもとにした独自解説です。本番の問題・難易度・合否を再現するものではありません。