← 学習メニュー
CCDV-F 練習問題 39
CCDV-F
新しい世代のモデルが公開され、ベンチマークの成績が大きく向上していると発表されました。チームは本番で使っているモデルを、プロンプトを変えずにすぐ切り替えようとしています。注意すべき点として最も適切なのはどれですか。
スポンサーリンク
選択肢を押して回答
正解と解説
正解：A
判断のポイント
モデルの更新では、移行ガイドで変更点を確認し、自社の評価セットで比べてから段階的に切り替えます。
A. 振る舞いが変わり得るので、移行ガイドと評価で確かめて切り替える（正解）
モデルの世代が変わると、指示への反応や出力の傾向、対応するパラメーターなどが変わることがあります。一般的なベンチマークの向上が、自社のタスクでの改善を保証するわけではありません。
B. 新しいモデルは古いプロンプトでは動かないので、プロンプトをすべて書き直す必要がある（不正解）
多くのプロンプトはそのまま動きます。まず評価で影響を確かめ、必要な部分を調整します。
C. 全利用者に一斉に適用して様子を見る（不正解）
品質が下がった場合に、全利用者が影響を受けます。評価と段階的な切り替えが先です。
D. ベンチマークが向上しているので、どのタスクでも品質が上がることが保証されている（不正解）
一般的なベンチマークは自社のタスクの成績を保証しません。
出題範囲：CCDV-F 分野5「モデル選択と最適化」・項目5.3 モデルの選択とトレードオフ
参考資料（公式ドキュメント）
公開資料をもとにした独自解説です。本番の問題・難易度・合否を再現するものではありません。