Pesquisadores da Universidade de Reading realizaram uma pesquisa interessante ao submeterem respostas escritas por IA em provas. Os resultados foram surpreendentemente melhores do que os dedenthumanos, e os professores não conseguiram diferenciar as respostas da IA das respostas humanas.
Pesquisadores criaram 33dentdent falsas para enviar respostas geradas por IA sem qualquer edição. As respostas foram geradas com o auxílio do ChatGPT-4 para avaliações online dedentde graduação em testes de psicologia. Os pesquisadores enviaram respostas de IA para 63 questões em formato de texto curto e dissertativo, sem que os professores responsáveis pela correção das provas fossem informados sobre a pesquisa.
As instituições de ensino não voltarão a aplicar provas escritas à mão
Os professores universitários desinformadosdentapenas uma das 33 provas submetidas como tendo sido escrita por IA. Ao mesmo tempo, as outras 32 provas passaram despercebidas e receberam notas mais altas do que asdentde alunos reais. Em números reais, 83% das provas escritas por IA receberam notas maiores do que asdentde alunos humanos.
Leia também: Aplicativos chineses de IA para educação ganham mercado nos Estados Unidos
O estudo foi liderado pelo Professor Etienne Roesch e pelo Professor Associado Peter Scarfe. Scarfe afirmou que a pesquisa demonstra a importância internacional do tema para a integridade das avaliações acadêmicas e como a IA as afetará. Ele disse:
“Não necessariamente voltaremos completamente aos exames manuscritos, mas o setor educacional global precisará evoluir diante da IA.”
Scarfe mencionou que a maioria das instituições mudou seus procedimentos tradicionais para garantir avaliações mais equitativas. Ambos os professores destacaram que as descobertas de suas pesquisas são um "alerta para os educadores"
Os ensaios escritos por IA têm uma baixa taxa de detecção
Os pesquisadores revelaram que as redações geradas por IA eram praticamente indetectáveis, já que 94% delas não apresentaram problemas aos verificadores. A revista Plos One, que publicou o estudo, afirmou que a taxa de detecção mais baixa provavelmente representa uma superestimação
“Isso é particularmente preocupante, visto que os trabalhos enviados por IA obtiveram notas significativamente mais altas do que os trabalhos enviados pordent reais.”
A revista também observou que osdentpodem trapacear usando IA e sair impunes. Eles podem até obter notas mais altas do que os alunos honestos que não usaram IA. Para o estudo, respostas geradas por IA foram submetidas para módulos do primeiro ao terceiro ano, usandodentfalsas. A IA superou osdenthumanos no primeiro e segundo módulos.
No entanto, os humanos tiveram um desempenho melhor nos exames do terceiro ano. Os pesquisadores afirmaram que isso está de acordo com a crença de que a IA não é boa em "raciocíniotrac", pelo menos em seu estado atual.
A IA ainda não possui a capacidade de raciocinar
O estudo também observou que a capacidade de raciocínio da IA aumentará com o tempo, enquanto sua detectabilidade diminuirá. Isso dificultará a manutenção da integridade acadêmica. Os pesquisadores afirmaram que o estudo pode levar ao fim das provas para serem feitas em casa ou sem supervisão.
O professor Roesch afirmou que o setor educacional precisa chegar a um consenso sobre como osdentpodem usar a IA em seus trabalhos. Ele insistiu que o mesmo se aplica ao uso da IA em outras áreas para manter a confiança em toda a sociedade.
Leia também: Soluções tecnológicas surgem para enfrentar o abismo das matrículas no ensino superior.
A Pró-Reitora de Educação da Universidade de Reading, Professora Elizabeth McCrum, afirmou que a universidade está limitando as provas para serem feitas em casa. Ela disse que a universidade está trabalhando no desenvolvimento de outras formas de avaliação que exijam a aplicação do conhecimento em situações da vida real, "frequentemente cenários relacionados ao ambiente de trabalho"
McCrum esclareceu que osdentpoderão usar IA em algumas avaliações para que aprendam a utilizá-la de forma ética. No entanto, outras tarefas não exigirão o uso de ferramentas de inteligência artificial. O professor afirmou que isso ajudará a aumentar o conhecimento dosdentsobre IA e a prepará-los para as exigências do mercado de trabalho atual.
Reportagem Cryptopolitan por Aamir Sheikh
