Capacidad técnicaAutomatización cognitiva2023-09-25
Los cuentos generados por modelos de lenguaje superaron 3–10 veces menos pruebas de creatividad que los de autores profesionales, halló una evaluación de expertos
Escritor y autorpágina de la ocupación →Fecha del hecho / publicación
2023-09-25
Categoría de la evidencia
Capacidad técnicaUna demostración, una prueba de referencia o un artículo muestran que la tarea se puede hacer. Actualiza lo que la tecnología puede hacer, no lo que harán las empresas.
Tareas sobre las que incide
Escribir ficción y libros
Redactar novelas, relatos y libros de no ficción.
Aumentada por la máquina≈ Inferencia de la plataforma
Dónde aplica esto
Un estudio en el que 10 escritores creativos evaluaron 48 cuentos escritos por autores profesionales o por modelos de lenguaje, con una batería de pruebas de creatividad. Los autores informan de que los cuentos generados por modelos superan 3–10 veces menos pruebas que los escritos por profesionales, y de que ninguno de los modelos usados como evaluadores se correlaciona positivamente con los expertos. Usó modelos de 2023; entre los coautores hay investigadores de una empresa de IA.
Qué significa esto
A juicio de escritores, los cuentos de los modelos con prompts quedaron muy por debajo de la ficción profesional: la distancia de oficio era grande en 2023.
Qué no muestra todavía
Modelos de 2023 y un conjunto pequeño de cuentos; los modelos más recientes y el ajuste fino cambian el panorama.
Qué puedes comprobar
Abre el artículo de arXiv «Art or Artifice?» (2309.14556) y busca «3-10X less TTCW tests».
¿Cambia la evaluación?
No, y esta categoría tampoco lo mueve. Un registro de «Capacidad técnica» es evidencia real, pero por sí solo no sube un juicio de tarea. 1 juicio enlazado de arriba se quedan donde estaban.
Fuente
Chakrabarty, Laban, Agarwal, Muresan and Wu (Columbia University and Salesforce AI Research) — Art or Artifice? Large Language Models and the False Promise of Creativity, arXiv:2309.14556 (CHI 2024; submitted 25 Sep 2023) · verificado 2026-09-30 · Claude (VOLO agent) · interpretado 2026-09-30 · Claude (VOLO agent)
Fuente primaria: publicada por la parte que hizo esto, o por la autoridad de referencia. No necesita cofirma.