Meta dice que su generación de pruebas basada en LLM está desplegada en su sistema de integración continua, y que su generador de pruebas de cobertura lleva dos años funcionando allí

Fecha del hecho / publicación

Categoría de la evidencia

Tareas sobre las que incide

Dónde aplica esto

Un artículo de personal de Meta sobre la generación de pruebas en la propia ingeniería de Meta. Dice que la generación de pruebas de endurecimiento basada en LLM y guiada por mutaciones ya está desplegada en el sistema de integración continua de Meta, que el generador anterior basado en cobertura lleva dos años desplegado en Meta y evolucionando con regularidad, y que, sobre 22.126 pruebas de captura generadas, unos evaluadores basados en reglas y en LLM redujeron un 70% la carga de revisión humana. Los autores dicen que los flujos de captura en sí se desplegaron sobre todo para recoger datos, y el artículo da recuentos incoherentes de capturas confirmadas; Meta construye estas herramientas para su propio uso.

Qué significa esto

Qué no muestra todavía

Las propias herramientas y datos de una empresa; no muestra menos testers ni cuán común es esto en otros sitios.

Qué puedes comprobar

¿Cambia la evaluación?

Fuente