生成AIパスポート 用語集機械学習
モデルの評価とはもでるのひょうか
モデルの評価の意味
モデルの評価とは、学習や調整を終えたAIモデルが、どの程度正しく役に立つ結果を出せるかを確かめる工程のことです。公式テキストではファインチューニングの3ステップの最後として位置づけられ、学習に使ったものとは別の新しいデータセットで性能を測ることで、未知のデータへの対応力(汎化性能)を確認します。
生成AIパスポート試験の対策なら → 無料の合格アプリ
詳しい解説
ファインチューニングは、①モデルのトレーニング、②ハイパーパラメータの調整、③モデルの評価、という3ステップで進みます。最後の評価で重要なのは、学習に使ったデータで成績を測らないことです。学習に使ったデータで測ると、丸暗記していても高得点が出てしまい、過学習を見逃す恐れがあるからです。
評価の結果、期待した性能に届かなければ、データを見直したり、ハイパーパラメータを調整し直したりして改善を図ります。評価は一度で終わりではなく、改善のサイクルを回すための出発点でもあります。
試験のポイント
モデルの評価の確認問題(○×)
ファインチューニングにおけるモデルの評価では、学習に使ったものとは別の新しいデータセットを使って性能を確かめる。
答えと解説を見る
答え:○
未知のデータに対応できるか(汎化性能)を確かめるため、学習に使っていないデータで評価します。
モデルの評価とあわせて覚えたい関連用語
- ファインチューニングファインチューニングとは、事前学習を終えたモデルに、特定の用途に合わせたデータを追加で学習させ、性能を微調整することです。
- ハイパーパラメータハイパーパラメータとは、機械学習のモデルが学習を始める前に、人が手動で設定・調整する値のことです。
- テストデータテストデータとは、学習がすべて終わったモデルの最終的な実力を測るために使う、学習にも調整にも一切使っていないデータのことです。
- 汎化性能汎化性能とは、機械学習のモデルが学習に使ったデータだけでなく、初めて見る未知のデータに対しても正しく予測・判断できる能力のことです。
- 過学習過学習とは、機械学習のモデルが訓練データに過度に適合してしまい、訓練データでは高い精度を出せるのに、初めて見るデータ(未知のデータ)に対して…