生成AIパスポート 用語集機械学習
テストデータとはてすとでーた
テストデータの意味
テストデータとは、学習がすべて終わったモデルの最終的な実力を測るために使う、学習にも調整にも一切使っていないデータのことです。モデルにとって完全に初めて見るデータで評価することで、実際の運用時に未知のデータへどれだけ正しく対応できるか、つまり汎化性能を客観的に確かめられます。
生成AIパスポート試験の対策なら → 無料の合格アプリ
詳しい解説
試験のポイント
- 学習や調整に使わない、最終評価専用のデータ
- 訓練データ・検証用データとの役割の違いを整理する
- 目的は未知データへの対応力(汎化性能)の確認
- 公式テキストではファインチューニング後の「モデルの評価」で、学習に使っていない別データを使うと説明されている
テストデータの確認問題(○×)
テストデータは、モデルの最終的な性能を測るため、学習や調整には使わないデータとして取り分けておく。
答えと解説を見る
答え:○
学習に使ったデータで評価すると、実力以上に成績が良く見えてしまうためです。
テストデータとあわせて覚えたい関連用語
- 訓練データ訓練データとは、機械学習のモデルが学習するために実際に使うデータのことです。
- 検証用データ検証用データとは、学習の途中でモデルの性能がどの程度かを確かめるために、学習に使うデータとは別に取り分けておくデータのことです。
- 汎化性能汎化性能とは、機械学習のモデルが学習に使ったデータだけでなく、初めて見る未知のデータに対しても正しく予測・判断できる能力のことです。
- モデルの評価モデルの評価とは、学習や調整を終えたAIモデルが、どの程度正しく役に立つ結果を出せるかを確かめる工程のことです。
- 過学習過学習とは、機械学習のモデルが訓練データに過度に適合してしまい、訓練データでは高い精度を出せるのに、初めて見るデータ(未知のデータ)に対して…