生成AIパスポート 用語集プロンプトエンジニアリング
計算が苦手な理由とはけいさんがにがてなりゆう
計算が苦手な理由の意味
計算が苦手な理由とは、テキスト生成AIが掛け算などの計算で誤答しやすい背景を指します。テキスト生成AIは数式を実際に計算しているのではなく、学習した文章のパターンから「それらしい数字の並び」を予測して出力しているため、桁の多い計算では誤った答えを自信ありげに示すことがあります。公式テキストではGPT-3.5の例で紹介されています。
生成AIパスポート試験の対策なら → 無料の合格アプリ
詳しい解説
公式テキストでは、GPT-3.5に「2023×510」を計算させたところ、正解の1,031,730ではなく1,034,130と答えた例が示されています。一見もっともらしい桁数の数字なので、確認しなければ誤りに気づきにくいのが厄介な点です。
電卓は決められた手順で正確に計算しますが、言語モデルは「次に来そうな文字」を予測する仕組みのため、計算の正確さは保証されません。これは、ハルシネーションと同じく、もっともらしい誤りが出力される現象の一つといえます。
対策としては、次のような方法があります。
- 金額や数量など重要な数値は、電卓や表計算ソフトで必ず検算する
- 途中の計算手順を書かせて、どこで間違えたかを確認しやすくする
- 計算機能(プログラム実行など)を備えたツールを使う
2023×510を計算してください。筆算のように途中の手順も示してください。
手順を書かせても答えが正しいとは限らないため、最終確認は人間が行います。
試験のポイント
- 計算はテキスト生成AIの不得意な4項目の1つ
- 例:2023×510の正解1,031,730に対し、GPT-3.5は1,034,130と誤答
- 原因は、計算ではなく文字列の予測で答えを出す仕組みにある
- 重要な数値は人間が別の手段で検算する
計算が苦手な理由の確認問題(○×)
公式テキストでは、GPT-3.5が2023×510の計算を誤答した例が紹介されている。
答えと解説を見る
答え:○
正解は1,031,730ですが、GPT-3.5は1,034,130と誤った答えを出力しました。