AIが大学教授を騙せるという研究結果

レディング大学の研究者たちは、AIが作成した解答を試験に提出するという興味深い研究を行いました。その結果は人間のdentの解答をはるかに上回り、教授陣はAIの解答と人間の解答を区別することができませんでした。.

研究者たちは、AIが生成した未編集の解答を提出させるため、33人の偽の学生dentdent作成しました。解答は、心理学試験におけるdentのオンライン評価のために、ChatGPT-4を用いて生成されました。研究者たちは、短答式とエッセイ形式の63問のAI解答を提出しましたが、採点を担当した教授陣には、この研究について何も知らされていませんでした。.

大学は手書きの試験には戻らない

情報に疎い大学教授たちは、33件の試験提出物のうち1件だけをAI作成だとdentしました。一方、残りの32件はAIdentだとは見分けられず、実際の学生の提出物よりも高い点数を得ました。実際には、AI作成の提出物の83%が人間の学生のdent物よりも高い点数を得ました。.

関連記事： 中国の教育AIアプリが米国で市場を獲得

この 研究は、 エティエンヌ・ロッシュ教授とピーター・スカーフ准教授が主導しました。スカーフ准教授は、この研究は学術評価の信頼性とAIがそれらに及ぼす影響について、国際的な重要性を示していると述べました。

「必ずしも完全に手書きの試験に戻るわけではないが、世界の教育分野はAIに直面して進化する必要があるだろう。」

スカーフ氏は、より公平な評価を確保するために、ほとんどの教育機関が従来の方法から転換していると述べた。両教授は、自らの研究結果が「教育者への警鐘」であると強調した。

AIエッセイの検出率は低い

研究者らは、AIによるエッセイはほぼ検出不可能であり、94%がチェッカーに問題を引き起こさなかったと明らかにした。この研究を発表したPlos One誌は、検出率の低さは過大評価である可能性が高いと述べている。

 「AIの提出物が実際のdent の提出物よりも確実に高い成績を獲得したため、これは特に心配です。」

同誌はまた、dentがAIを使って不正行為をしても罰せられない可能性を指摘している。AIを使わなかった正直な学生よりも高い点数を獲得できる可能性もある。この研究では、1年生から3年生までのモジュールについて、偽のdentを使ってAIが生成した解答が提出された。AIは1年生と2年生のモジュールで人間のdentを上回った。.

しかし、3年生の試験では人間の方が良い成績を収めました。研究者たちは、これは少なくとも現状ではAIは「trac推論」が得意ではないという考えと一致すると述べています。.

AIはまだ推論能力が不足している

この研究では、AIの推論能力は時間とともに向上し、検出可能性は低下するとも指摘されている。これにより、学術的誠実性を維持することがより困難になるだろう。研究者らは、この研究によって持ち帰り試験や監督なしの試験が廃止される可能性があると述べている。. 

ロッシュ教授は、教育分野はdentが仕事でAIをどのように活用できるかについて合意する必要があると述べた。社会全体の信頼を維持するために、他の分野でのAIの活用についても同様のことが言えると強調した。. 

関連記事： 高等教育の入学率低下に対処するための技術ソリューションが登場

レディング大学の教育担当副学長、エリザベス・マクラム教授は、大学は持ち帰り試験を制限していると述べた。また、大学は実生活の状況、特に「職場関連のシナリオ」で知識を応用することを求める、他の方法の開発に取り組んでいると述べた。 

マクラム教授は、dentが倫理的にAIを使用する方法を理解するために、一部の評価課題ではAIの使用を許可すると明言した。しかし、その他の課題ではAIツールの使用は必須ではない。マクラム教授は、これによりdentのAIリテラシーが向上し、現代の職場の要件に対応できるようになると述べた。. 

Cryptopolitan アーミール・シェイク記者によるレポート