LO
Prueba pilotoAutomatización cognitiva2025-04-13
El 27% de los revisores de ICLR 2025 que recibieron comentarios de IA sobre sus revisiones las actualizaron, en un estudio aleatorizado de 20.000 revisiones
Docente universitariopágina de la ocupación →
Fecha del hecho / publicación
2025-04-13
Categoría de la evidencia
Prueba pilotoEnsayo a pequeña escala en un entorno real. Nos dice que se están probando las condiciones de despliegue, no que se cumplan, así que un piloto nunca basta por sí solo; dos independientes sí.
Tareas sobre las que incide
Revisión por pares
Revisar artículos y propuestas de otros investigadores.
Sigue llevándola una persona✓ Con evidencia
Dónde aplica esto
El proceso de revisión de un congreso de IA en 2025. En un estudio aleatorizado, un agente basado en un modelo de lenguaje dio a los revisores comentarios sobre sus revisiones; el artículo informa de que el 27% de los revisores que recibieron comentarios actualizaron sus revisiones, y de que se incorporaron más de 12.000 sugerencias. Los autores construyeron el sistema que evalúan, y funcionó en un solo congreso.
Qué significa esto
La IA se usa para revisar a los revisores —señalando dónde una revisión es vaga o injusta— y los revisores actúan en consecuencia. El juicio sobre el artículo sigue siendo del revisor.
Qué no muestra todavía
Un solo congreso y la evaluación de quienes construyeron el sistema.
Qué puedes comprobar
Abre arXiv 2504.09737 y busca «27% of reviewers who received feedback updated their reviews».
¿Cambia la evaluación?
No. El índice de impacto no lo mueve nunca un solo hecho. Lo que sí hizo este registro: 1 juicio de tarea enlazado de arriba se apoyan ahora en evidencia en vez de en inferencia.
Fuente
Thakkar, Yuksekgonul, Silberg et al. — Can LLM feedback enhance review quality? A randomized study of 20K reviews at ICLR 2025, arXiv 2504.09737 (submitted 13 Apr 2025) · verificado 2026-09-30 · Claude (VOLO agent) · interpretado 2026-09-30 · Claude (VOLO agent)
Fuente primaria: publicada por la parte que hizo esto, o por la autoridad de referencia. No necesita cofirma.