Nas 599 perguntas dos exames nacionais de nutricionista registado do Japão, a melhor configuração do GPT-4o obteve 83,5%, mas mostrou um desempenho limitado nas perguntas numéricas, informaram investigadores

Data do facto / publicação

Categoria da prova

Tarefas sobre as quais incide

Onde é que isto se aplica

Japão. Um estudo que testou o GPT-4o, o GPT-4o-mini e o GPT-4o com recuperação de informação em 599 perguntas de escolha múltipla publicamente disponíveis dos exames nacionais de 2022–2024. Todos passaram o limiar de 60%; o GPT-4o-RAG obteve a pontuação mais alta, 83,5%, saiu-se melhor em nutrição aplicada e clínica, mas mostrou um desempenho limitado nas perguntas numéricas, e os autores dizem que as limitações no raciocínio numérico e na orientação individualizada justificam mais desenvolvimento. Perguntas de exame, não doentes.

O que isto significa

O que ainda não mostra

Perguntas de exame de escolha múltipla; não é um teste de orientação para doentes reais.

O que podes verificar

Muda a avaliação?

Fonte