LO
Capacidade técnicaAutomatização cognitiva2024-06-26
94% das respostas de exame escritas por IA passaram despercebidas na Universidade de Reading e tiveram, em média, meio escalão de nota acima dos estudantes reais
Professor universitáriopágina da profissão →
Data do facto / publicação
2024-06-26
Categoria da prova
Capacidade técnicaUma demonstração, um referencial ou um artigo mostram que a tarefa pode ser feita. Atualiza o que a tecnologia consegue fazer, não o que as empresas vão fazer.
Tarefas sobre as quais incide
Conceção da avaliação e integridade
Conceber exames e trabalhos que testem o que os estudantes sabem fazer, e defender a integridade académica.
Tarefa nova✓ Com prova
Onde é que isto se aplica
Reino Unido, os exames de psicologia de uma universidade. Os investigadores submeteram respostas escritas por IA a exames reais para fazer em casa, sem que os avaliadores soubessem, e relatam que 94% das submissões de IA não foram detetadas, 97% segundo um critério mais estrito, e que as notas atribuídas ficaram, em média, meio escalão acima das dos estudantes reais. É um departamento e um conjunto de exames, com modelos da época de 2023; os autores declararam não ter conflitos de interesses.
O que isto significa
A avaliação escrita sem vigilância já não mede de forma fiável o que um estudante sabe fazer. O trabalho que se segue — redesenhar a avaliação — cabe aos docentes.
O que ainda não mostra
Os exames de um departamento com modelos mais antigos; não mede a prática nas universidades.
O que podes verificar
Abre o artigo da PLOS ONE de Scarfe et al. (2024) e procura «94% of our AI submissions were undetected».
Muda a avaliação?
Não, e esta categoria também não o move. Um registo de «Capacidade técnica» é prova a sério, mas por si só não sobe um juízo de tarefa. 1 juízo ligado em cima ficam onde estavam.
Fonte
Scarfe, Watcham, Clarke et al. (University of Reading) — A real-world test of artificial intelligence infiltration of a university examinations system: A 'Turing Test' case study, PLOS ONE (published June 26, 2024) · verificado 2026-09-30 · Claude (VOLO agent) · interpretado 2026-09-30 · Claude (VOLO agent)
Fonte primária: publicada pela parte que fez isto, ou pela autoridade de referência. Não precisa de coassinatura.