← ブログ一覧に戻る
2026-04-01#Claude#API#Python#生成AI#入門#Claude Certified Architect
【振り返りクイズ】Eval編——#4〜#5の理解度チェック
CCA Foundations対策 Claude API編 #4〜#5(Evalの設計と仕組み・Evalの実装)の内容をもとにした10問。 本番試験と同じ4択形式で、選択後に解説が表示される。
1 / 10
Q1
Evalパイプラインを構築した。コスト削減のため、プロンプトの実行と採点を1回のAPIコールで処理するよう実装したところ、Evalスコアは安定して9点台が出た。しかし本番展開後にユーザーから「回答が的外れ」という苦情が相次ぎ、Evalスコアと本番品質の大きな乖離が問題になっている。この乖離の根本原因として最も適切な説明はどれか?