연구에 따르면 AI는 대학 교수들을 속일 수 있는 것으로 나타났습니다

Reading 대학의 연구원들은 AI가 작성한 답안을 시험에 제출하여 흥미로운 연구를 수행했습니다. 결과는 인간 학생들의 결과보다 놀라울 정도로 좋았으며, 교수들은 AI 답안과 인간 답안을 구분하지 못했습니다.

연구원들은 33개의 가짜 학생 신분을 만들어 수정되지 않은 AI 생성 답안을 제출했습니다. 답안은 심리학 테스트의 학부생 온라인 평가를 위해 ChatGPT-4의 도움을 받아 생성되었습니다. 연구원들은 짧은 형식과 에세이 형식으로 63개의 질문에 대한 AI 답안을 제출했으며, 답안을 채점하던 교수들은 연구에 대해 알지 못했습니다.

교육 기관들은 필기 시험으로 돌아가지 않을 것이다

연구를 모르는 대학 교수들은 33개의 시험 제출물 중 AI가 작성한 것을 단 하나만 식별했습니다. 동시에 나머지 32개의 제출물은 발견되지 않았으며 실제 학생들보다 더 높은 성적을 받았습니다. 실제 수치로 보면, AI가 작성한 제출물의 83%가 인간 학생들보다 더 많은 점수를 받았습니다.

또한 읽기: 중국 교육용 AI 앱, 미국 시장에서 시장 점유율 확대

연구는 에티엔 로슈 교수와 피터 스카프 부교수가 주도했습니다. 스카프는 그들의 연구가 학술 평가의 무결성과 AI가 이에 미치는 영향에 있어 국제적으로 중요하다고 말했습니다. 그는 다음과 같이 말했습니다.

"우리가 반드시 필기 시험으로 완전히 돌아가지는 않을 것입니다. 하지만 글로벌 교육 부문은 AI에 직면하여 진화해야 할 것입니다."

스카프는 대부분의 기관이 더 공정한 평가를 위해 전통적인 절차에서 전환했다고 언급했습니다. 두 교수 모두 그들의 연구 결과가 교육자들에게 '각성'을 불러일으킨다고 강조했습니다.

AI 에세이의 탐지율은 낮다

연구원들은 AI 에세이가 거의 탐지되지 않았다고 밝혔습니다. 검사기들이 94%의 에세이에서 우려를 제기하지 않았기 때문입니다. 이 연구를 출판한 저널 Plos One은 낮은 탐지율이 과대평가일 가능성이 있다고 말했습니다. 그들은 다음과 같이 말했습니다.

 "이는 특히 AI 제출물이 실제 학생 제출물보다 견고하게 더 높은 성적을 얻었기 때문에 특히 우려스럽습니다."

저널은 또한 학생들이 AI를 사용하여 부정행위를 하고 들키지 않을 수 있다고 지적했습니다. 그들은 AI를 사용하지 않은 정직한 학생들보다 더 높은 점수를 받을 수도 있습니다. 연구를 위해 AI가 생성한 답안은 가짜 신분을 통해 1학년에서 3학년 모듈에 대해 제출되었습니다. AI는 1학년과 2학년 모듈에서 인간 학생들을 제쳤습니다.

하지만 인간은 3학년 시험에서 더 높은 점수를 받았습니다. 연구진은 이것이 현재 상태의 AI가 ‘추상적 추론’에 능숙하지 않다는 믿음과 일치한다고 말했습니다.

AI는 여전히 추론 능력이 부족합니다

연구진은 또한 AI의 추론 능력이 시간이 지남에 따라 증가하고 탐지 가능성은 감소할 것이라고 지적했습니다. 이는 학문적 정직성을 유지하는 것을 더 어렵게 만들 것입니다. 연구진은 이 연구가 기말고사 또는 감독 없는 시험의 종료를 초래할 수 있다고 말했습니다. 

Roesch 교수는 교육 부문이 학생들이 자신의 작업에서 AI를 어떻게 사용할지에 대해 합의해야 한다고 말했습니다. 그는 사회 전반의 신뢰를 유지하기 위해 다른 영역에서의 AI 사용에도 같은 원칙이 적용된다고 강조했습니다. 

또한 읽기: 기술 솔루션이 고등교육의 입학 감소 절벽을 해결하기 위해 등장하다

Reading 대학의 교육 담당 부총장인 Elizabeth McCrum 교수는 대학이 기말고사를 제한하고 있다고 말했습니다. 그는 대학이 실제 상황, 특히 ‘직장 관련 시나리오’에서 지식을 적용해야 하는 다른 방법을 개발 중이라고 말했습니다. 

McCrum 교수는 학생들이 윤리적으로 AI를 사용하는 방법을 알 수 있도록 일부 평가에서는 AI 사용을 허용할 것이라고 명확히 했습니다. 그러나 다른 과제에서는 인공지능 도구 사용을 요구하지 않을 것입니다. 이 교수는 이것이 학생들의 AI 리터러시를 높이고 현대 직장 요구사항에 대비하는 데 도움이 될 것이라고 말했습니다. 

Aamir Sheikh가 Cryptopolitan에서 보도