# Le banc d'essai GDPval d'OpenAI a recueilli de vrais livrables d'acheteurs et fait noter à l'aveugle la production des modèles par des experts du secteur face à ces livrables

Page: https://flyvolo.ai/fr/changes/ev-20251005-procurement-specialist-1
Date: 2025-10-05 · Étape: Capacité technique
Ce relevé peut-il faire évoluer un jugement sur une tâche ? non
Métier: https://flyvolo.ai/fr/careers/procurement-specialist

## Périmètre

Les acheteurs et agents d'approvisionnement sont l'un des 44 métiers américains du banc d'essai, répartis sur les neuf secteurs qui contribuent le plus au PIB américain ; 1 320 tâches dans l'ensemble complet, avec au moins 30 par métier, chacune bâtie sur un vrai livrable produit par un professionnel comptant en moyenne 14 ans d'expérience et couvrant la majorité des activités O*NET de ce métier. Ce qui est noté est un livrable, en un seul coup, par comparaison appariée à l'aveugle par des experts — non un métier. Il n'y a ni client, ni tour de révision, ni négociation, ni conséquence en cas d'erreur. Le chiffre affiché (47,6 % des livrables du sous-ensemble de référence d'un modèle jugés meilleurs ou aussi bons que celui de l'expert) porte sur la génération de modèles de septembre 2025 et a été dépassé ; plus utilement, l'article rapporte que les taux de victoire sont les plus élevés sur les tâches de 0 à 2 heures et déclinent régulièrement à mesure que la tâche s'allonge. Les taux par métier ne sont publiés que sous forme de figure : aucun chiffre propre aux achats n'est donc cité ici. OpenAI a conçu le banc d'essai, l'a exécuté, et vend des modèles qu'il mesure.

## Source

- GDPval: Evaluating AI Model Performance on Real-World Economically Valuable Tasks (OpenAI, arXiv:2510.04374) — https://arxiv.org/pdf/2510.04374 (source primaire)

## Ce que cela veut dire

Quelqu'un a désormais écrit ce que ce métier produit, en public, sous une forme que n'importe qui peut opposer à un modèle — une trentaine de vrais livrables d'achat, venus d'un praticien avec plus d'une décennie derrière lui. Cela place dans le domaine public une description du versant livrables de ce métier. Cela mérite d'être lu pour la description plus que pour la note : le banc d'essai est une liste de ce dont la moitié documentaire de ce métier consiste réellement.

## Ce qu’il ne montre pas encore

Cela ne montre pas un modèle faisant votre métier, et les auteurs du banc d'essai ne le prétendent pas. Une tâche GDPval arrive entièrement spécifiée, ses fichiers de référence joints, et est notée une fois. Les parties de ce métier qui ne sont pas un livrable — savoir qu'un fournisseur va défaillir, décider qui sera servi en dernier, être la personne qu'un directeur d'usine appelle à minuit — n'y sont pas et n'étaient pas censées y être. Cela ne dit pas non plus qu'un employeur a changé quoi que ce soit : c'est une mesure de capacité, et la capacité n'est pas l'adoption.

## Comment le vérifier vous-même

Prenez le travail du mois dernier et faites deux piles : ce qui a fini en document lu par quelqu'un d'autre, et ce qui a fini en décision ou en appel téléphonique. GDPval teste seulement la première pile. Le rapport entre vos deux piles est ce qu'il faut savoir, et personne d'autre ne peut le calculer pour vous.


Plus : https://flyvolo.ai/llms.txt