研究により、AIが大学の教授を欺くことができることが判明

リーディング大学の研究者たちは、AIによって書かれた回答を試験に提出するという興味深い研究を行った。その結果は人間の学生よりも驚くほど優れており、教授たちはAIの回答と人間の回答を区別できなかった。

研究者たちは、編集されていないAI生成の回答を提出するために33の架空の学生IDを作成した。回答は、心理学テストの学部生向けオンライン評価においてChatGPT-4の助けを借りて生成された。研究者たちは、短い形式とエッセイ形式で63の質問に対するAI回答を提出したが、答案を採点していた教授たちは研究について知らされていなかった。

機関は手書きの試験に戻らない

研究の存在を知らなかった大学の教授たちは、33の試験提出物のうち1つだけをAIが作成したものと特定した。同時に、他の32の提出物は発見されず、実際の学生よりも高い成績を受けた。実際の数字では、AIが作成した提出物の83%が人間の学生よりも高い点数を得た。

関連記事: 中国の教育用AIアプリが米国で市場を拡大

研究は、エティエンヌ・ロッシュ教授とピーター・スカーフ准教授によって主導された。スカーフ氏は、彼らの研究は学術評価の整合性、およびAIがそれらに与える影響にとって国際的に重要であることを示していると述べた。彼は言った。

「必ずしも完全に手書きの試験に戻るわけではないが、グローバルな教育セクターはAIに対処するために進化しなければならない。」

スカーフ氏は、ほとんどの機関がより公平な評価を確保するために伝統的な手続きから移行したと述べた。両教授は、彼らの研究結果が教育者にとっての「目覚めの呼びかけ」であることを強調した。

AIによるエッセイの検出率は低い

研究者たちは、AIによるエッセイはほぼ検出不可能であり、94%がチェッカーに懸念を抱かせなかったことを明らかにした。この研究を掲載したジャーナル『Plos One』は、この低い検出率は過大評価である可能性が高いと述べた。それは次のように述べている。

 「これは特に懸念される。AIによる提出物は、実際の学生の提出物よりも堅固に高い成績を獲得したからである。」

同ジャーナルはまた、学生がAIを使用して不正を行い、それを免れる可能性があると指摘した。彼らは、AIを使用しない誠実な学生よりも高い点数を得るかもしれない。研究では、AIによって生成された回答が、架空のIDを使用して1年生から3年生のモジュールに提出された。AIは1年生と2年生のモジュールで人間の学生を上回った。

しかし、人間は3年生の試験でより高いスコアを獲得した。研究者たちは、これはAIが現在の状態では「抽象的な推論」が苦手であるという信念と一致していると述べた。

AIはまだ推論能力に欠けている

研究はまた、AIの推論能力は時間とともに増加し、検出可能性は低下すると指摘した。これは学術的整合性を維持することをより困難にする。研究者たちは、この研究により、持ち帰り試験や監督なしの試験が終了する可能性があると言った。 

ロッシュ教授は、教育セクターが学生が作業でAIをどのように使用できるかについて合意する必要があると述べた。彼は、社会全体の信頼を維持するために、他の分野でのAIの使用についても同様であると強調した。 

関連記事: 高等教育の入学減少危機に対処するためのテクノロジーソリューションが登場

リーディング大学の教育担当副学長、エリザベス・マクラム教授は、大学が持ち帰り試験を制限していると述べた。彼は、大学が「多くの場合、職場に関連するシナリオ」において現実の状況で知識を適用することを要求する他の方法の開発に取り組んでいると述べた。 

マクラム氏は、学生がAIを倫理的に如何使用するかを知るために、一部の評価ではAIの使用を許可すると明確にした。しかし、他の課題では人工知能ツールの使用は必要とされない。教授は、これが学生のAIリテラシーを高め、現代の職場要件に備えるのに役立つだろうと言った。 

CryptopolitanによるAamir Sheikhのレポート