← 学習メニュー

CCAR-P 練習問題 23

CCAR-P

社内規程の Q&A の RAG は、毎回50件のチャンクを取得して再ランキングしてから回答しており、応答に平均6秒かかります。評価では、再ランキングの対象を上位15件に減らしても正答率は0.5ポイントしか下がらず、応答時間は約2秒短くなりました。正答率の基準には余裕があります。対応として最も適切なのはどれですか。

スポンサーリンク
1つ選択してください

選択肢を押して回答

正解と解説

正解:B

判断のポイント

正確さと遅延のトレードオフは、評価で影響を測って判断します。基準を満たす範囲で、利用者の体験を良くする設定を選びます。

A. 再ランキングを外し、取得の件数も5件に減らして最速にする(不正解)

評価をせずに大きく削ると、正答率が基準を下回るおそれがあります。

B. 評価の結果を根拠に対象を15件に減らし、本番でも正答率と遅延を監視する(正解)

正確さと遅延はトレードオフの関係にあります。評価で影響を測り、基準を満たす範囲で遅延を下げる設定を選びます。

C. 正答率が少しでも下がるなら、変更は一切しない(不正解)

基準に余裕がある中で、利用者の待ち時間を下げる機会を捨てています。

D. 取得の件数を100件に増やし、正答率をさらに上げる(不正解)

遅延がさらに大きくなり、利用者の不満が増えます。

出題範囲:CCAR-P 分野3「システム統合」・項目3.3 正確さと遅延のトレードオフ

参考資料(公式ドキュメント)

公開資料をもとにした独自解説です。本番の問題・難易度・合否を再現するものではありません。