Um estudo revela que a IA pode enganar professores universitários
Professores universitários não conseguem diferenciar respostas geradas por IA das escritas à mão.
- Um estudo recente na Universidade de Reading mostra que a IA pode superar estudantes universitários médios.
- No estudo de pesquisa, os avaliadores de exames não conseguiram diferenciar entre alunos da IA e humanos.
- A IA ainda não consegue raciocinar e não supera os alunos no módulo do terceiro ano.
Pesquisadores da Universidade de Reading conduziram uma pesquisa interessante submetendo respostas escritas por IA em exames. Os resultados foram surpreendentemente melhores do que os dos estudantes humanos, e os professores foram incapazes de diferenciar as respostas da IA das respostas humanas.
Os pesquisadores criaram 33 identidades falsas de estudantes para submeter respostas geradas por IA sem edição. As respostas foram geradas com a ajuda do ChatGPT-4 para avaliações online de estudantes de graduação em testes de psicologia. Os pesquisadores submeteram respostas da IA para 63 perguntas em formato curto e de ensaio, enquanto os professores que estavam corrigindo os trabalhos não foram informados sobre a pesquisa.
Institutos não voltarão para exames manuscritos
Os professores universitários desinformados identificaram apenas uma das 33 submissões de exame como escrita por IA. Ao mesmo tempo, as outras 32 submissões passaram despercebidas e receberam notas mais altas do que os estudantes reais. Em números reais, 83% das submissões escritas por IA receberam mais pontos do que os estudantes humanos.
Também leia: Aplicativos de IA educacional chineses ganham mercado nos Estados Unidos
O estudo foi liderado pelo Professor Etienne Roesch e pelo Professor Associado Peter Scarfe. Scarfe disse que sua pesquisa mostra que é de importância internacional para a integridade das avaliações acadêmicas e como a IA as afetará. Ele disse:
“Não necessariamente voltaremos totalmente para exames manuscritos – mas o setor de educação global precisará evoluir diante da IA.”
Scarfe mencionou que a maioria das instituições mudou de procedimentos tradicionais para garantir avaliações mais equitativas. Ambos os professores destacaram que as descobertas de sua pesquisa são um “sinal de alerta para os educadores.”
Ensaios de IA têm baixa taxa de detecção
Os pesquisadores revelaram que os ensaios de IA eram quase indetectáveis, pois 94% deles não levantaram preocupações com os verificadores. O Journal Plos One, que publicou o estudo, disse que a taxa de detecção mais baixa provavelmente é uma superestimação. Ele disse:
“Isso é particularmente preocupante, pois as submissões de IA ganharam robustamente notas mais altas do que as submissões reais dos estudantes,”
O journal também observou que os estudantes podem trapacear usando IA e sair impunes. Eles também podem obter notas mais altas do que os honestos que não usaram IA. Para o estudo, respostas geradas por IA foram submetidas para módulos do primeiro ao terceiro ano por meio de identidades falsas. A IA superou os estudantes humanos nos módulos primeiro e segundo.
No entanto, os humanos tiveram melhor desempenho nos exames do terceiro ano. Os pesquisadores disseram que isso é consistente com a crença de que a IA não é boa em “raciocínio abstrato”, pelo menos em seu estado atual.
A IA ainda carece da capacidade de raciocinar
O estudo também observou que a capacidade de raciocínio da IA aumentará com o tempo, e sua detectabilidade diminuirá. Isso tornará mais difícil manter a integridade acadêmica. Os pesquisadores disseram que o estudo pode acabar com os exames para casa ou sem supervisão.
O Prof. Roesch disse que o setor de educação precisa concordar sobre como os estudantes podem usar a IA em seu trabalho. Ele insistiu que o mesmo é verdadeiro para usos da IA em outras áreas para manter a confiança em toda a sociedade.
Também leia: Soluções tecnológicas surgem para lidar com o abismo de matrícula no ensino superior
O Vice-Reitor de Educação em Reading, Professor Elizabeth McCrum, disse que a universidade está limitando os exames para casa. Ele disse que a universidade está trabalhando no desenvolvimento de outras maneiras que exigiriam a aplicação de conhecimento em situações da vida real, “muitas vezes cenários relacionados ao local de trabalho.”
McCrum esclareceu que os estudantes serão permitidos usar a IA para algumas avaliações para que saibam como usá-la eticamente. No entanto, outras atribuições não exigirão o uso de ferramentas de inteligência artificial. O professor disse que isso ajudará a aumentar a alfabetização em IA dos estudantes e prepará-los para os requisitos modernos do local de trabalho.
Reportagem da Cryptopolitan por Aamir Sheikh
As mentes mais inteligentes do setor de criptomoedas já leem nosso boletim informativo. Quer entrar? Junte-se a eles.
Aviso Legal. As informações fornecidas não constituem aconselhamento de investimento. Cryptopolitan.com não assume responsabilidade por quaisquer investimentos realizados com base nas informações fornecidas nesta página. Recomendamos fortemente a realização de pesquisa independente e/ou consulta com um profissional qualificado antes de tomar quaisquer decisões de investimento.
Aamir Sheikh
Aamir é um jornalista de tecnologia com quase seis anos de experiência nos setores de criptomoedas e tecnologia. Formou-se na MAJ University com um MBA em Finanças e Marketing. Atualmente trabalha na Cryptopolitan, onde relata os últimos desenvolvimentos nos mercados de criptomoedas e previsões de preços.
