人間にはまだ経済力がある：会計試験ではChatGPTが大学生よりも劣っていることが調査で判明

ChatGPT の会計試験における成績は人間よりもはるかに劣っており、間違った答えを正当化するために無意味なことを話すことさえあります。

米国のブリガム ヤング大学の会計教授ウッド氏と彼のチームは、ChatGPT が大学の会計コースの質問に答えられるかどうかをテストすることにしました。彼らはソーシャル メディアで呼びかけを開始し、14 か国の 186 の教育機関から 327 人の協力者を集めました。会計情報システム、監査、財務会計、管理会計、税務などの分野をカバーする会計試験問題を合計 25,181 問提供します。彼らはまた、ウッドの娘ジェシカを含むBYUの学部生に、2,268の教科書試験の問題をChatGPTに入力するよう招待した。

結果は、ChatGPT のパフォーマンスには明るい点もありますが、一般的にはまだ学生レベルほど良くないことを示しています。学生の平均スコアは 76.7% でしたが、ChatGPT の平均スコアはわずか 47.4% でした。 ChatGPT は、質問の 11.3% で、特に会計情報システムと監査で学生平均よりも高いスコアを獲得しました。ただし、税金、財務、経営に関しては、ChatGPT では不十分です。これはおそらく、これらの分野ではより多くの数学スキルが必要となるためです。質問の種類に関しては、ChatGPT は正誤質問 (正解率 68.7%) と多肢選択問題 (正解率 59.5%) では優れていますが、短答式質問 (正解率 28.7% ～ 39.1%) では苦戦しています。一般に、より高度な思考を必要とする質問は、ChatGPT が答えるのがより困難です。場合によっては、ChatGPT は、間違った回答に対して信頼できる説明を提供したり、同じ質問に対して異なる回答を提供したりすることもあります。

「完璧ではありません。すべての機能を期待することはできません。」とジェシカさんは言いました。「ChatGPT に頼って学習するのは愚かです。」

IT House は、研究者らは次のように述べています。他にもいくつかの興味深い現象を発見しました:

• ChatGPT 彼らは時々、自分が数学の問題をやっているということを知らず、引き算の問題に 2 つの数値を足したり、割り算をしたりするなど、とんでもない間違いを犯します。計算が間違っています。
• ChatGPT は、答えが間違っている場合でも、答えの説明を提供することがよくあります。 ChatGPT の説明は正しいのに、間違ったオプションが選択される場合があります。
• ChatGPT は時々物事をでっち上げます。たとえば、参考文献を提供する場合、本物に見える参考文献が生成されますが、実際には完全に架空のものであり、場合によっては著者さえも存在しません。

それにもかかわらず、研究者らは、将来のバージョンでは、ChatGPT が会計の問題を改善し、上記の問題を解決すると信じています。彼らが最も期待しているのは、チャットボットが課題の設計やテスト、またはプロジェクトの一部の下書きに使用されるなど、教育と学習の改善に役立つことです。

「これは、私たちが貴重な情報を教えているかどうかを振り返り、確認する機会です。」とBYUの会計教授であり、研究の共著者の一人であるラーソン氏は述べた。 「私たちが次に何をするかを評価してください。もちろん、ティーチング・アシスタントは引き続きいますが、彼らの仕事の内容は異なります。」

この研究は、ジャーナル「会計教育の問題」に掲載されました。

以上が人間にはまだ経済力がある：会計試験ではChatGPTが大学生よりも劣っていることが調査で判明の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。