生成AIパスポート 用語集大規模言語モデルとGPT
GPT-4とはじーぴーてぃーふぉー
GPT-4の意味
GPT-4とは、2023年3月にOpenAIがリリースした大規模言語モデルです。米国の司法試験で上位10%に入る成績を記録したことで話題になりました。GPT-3.5と比べて、ハルシネーションの減少、文章と画像を組み合わせて扱えるマルチモーダル対応、多言語での文章生成精度の向上という3つの点で大きく進化しています。学習データは2021年9月までとされています。
生成AIパスポート試験の対策なら → 無料の合格アプリ
詳しい解説
公式テキストでは、GPT-4の主な向上点が次のように整理されています。
多言語の比較では、GPT-3.5の英語が70.1%だったのに対し、GPT-4の日本語は79.9%、GPT-4の英語は85.5%でした。比較対象として、Chinchillaの英語67.0%、PaLMの英語69.3%も示されています。ただしハルシネーションはなくなったわけではなく、GPT-4でも発生するため、出力内容の確認は引き続き必要です。
試験のポイント
- 2023年3月リリース。米国の司法試験で上位10%の成績
- 学習データは2021年9月まで
- ハルシネーションがGPT-3.5比で19〜29%程度低下(ゼロになったわけではない)
- マルチモーダルに対応(画像を見て内容を説明できる)
- 26言語中24言語でGPT-3.5の英語精度を上回り、日本語は79.9%
GPT-4の確認問題(○×)
GPT-4では、ハルシネーションが完全に解消され、誤った情報を出力することはなくなった。
答えと解説を見る
答え:×
GPT-4ではGPT-3.5よりハルシネーションが19〜29%程度減りましたが、発生しなくなったわけではありません。
GPT-4とあわせて覚えたい関連用語
- GPT-3.5GPT-3.5とは、2022年にOpenAIが発表したGPT-3の改良版の大規模言語モデルです。
- GPT-4oGPT-4oとは、2024年5月にOpenAIがリリースした大規模言語モデルです。
- ハルシネーションハルシネーションとは、生成AIが事実と異なる内容や、文脈と関係のない内容を、あたかも本当のことのようにもっともらしく出力してしまう現象です。
- マルチモーダルマルチモーダルとは、テキスト・画像・音声・動画など、異なる種類のデータ(モダリティ)をまとめて処理できるAIの技術や性質のことです。
- PaLMPaLMとは、Pathways Language Modelの略で、Googleが開発した大規模言語モデルです。
- ChinchillaChinchillaとは、DeepMind(Googleグループの研究機関)が開発した大規模言語モデルです。