Ce qui s'automatise vraiment, et comment le repérer

Deux entreprises, deux couches de la pile, la même machinerie

Airbnb a publié le récit de la migration de près de 3 500 fichiers de tests de composants React d'un cadre de test à un autre : six semaines contre une estimation manuelle d'un an et demi, avec 75 % des fichiers traités dès la première passe groupée de quatre heures. Amazon a publié avoir fait passer des dizaines de milliers de ses propres applications Java en production vers une version plus récente de Java, estimant l'équivalent manuel à plus de 4 500 années de travail de développement.

Ni l'un ni l'autre ne concerne l'écriture de logiciels neufs. Les deux concernent la modification de logiciels qui existent déjà et doivent continuer à fonctionner. Et les deux ont marché pour une raison que chaque entreprise énonce clairement : chaque étape du travail a un arbitre automatique. Le compilateur rejette ce qui ne se construira pas ; la suite de tests attrape l'essentiel de ce qui se construit mais reste faux ; l'analyseur de style et le vérificateur de types attrapent le reste. Airbnb a modélisé sa migration comme une machine à états où un fichier n'avance que si le contrôle précédent passe, puis s'est contenté de réessayer — la plupart des fichiers ont abouti en moins de dix tentatives.

C'est là tout le tour de main, et il vaut la peine de le dire simplement : le modèle n'était pas meilleur qu'une personne à cet exercice. Il a eu le droit de se tromper, à bas coût, des milliers de fois, sans personne pour regarder. Un ingénieur humain ne peut pas se tromper cent fois sur un même fichier. Une boucle, si.

Airbnb a aussi publié le plafond, et c'est la chose la plus rare

Trois pour cent des fichiers ne sont pas passés. Chacun d'eux avait été réessayé entre cinquante et cent fois avant que l'équipe s'arrête et les termine à la main. Ce chiffre est plus utile que les 97 % au-dessus de lui, parce qu'il mesure la part que l'automatisation n'a pas pu atteindre alors même que réessayer était presque gratuit.

Notez aussi ce qui, selon l'équipe, a fait la différence sur les fichiers difficiles : non une meilleure formulation des consignes, mais le choix des fichiers liés à placer sous les yeux du modèle — jusqu'à cinquante d'entre eux, des consignes atteignant cent mille jetons. L'intrant rare était de savoir quelles parties du dépôt étaient pertinentes. C'est un jugement sur le code d'une entreprise précise, et il a été porté par les personnes qui y travaillent.

Le cas inverse : retirez l'arbitre et le sens s'inverse

Un essai contrôlé randomisé mené par METR a confié à seize mainteneurs open source expérimentés 246 tickets réels dans des dépôts qu'ils connaissaient bien. Avec des outils de l'ère 2025, ils ont été 19 % plus lents. Ils croyaient avoir été 20 % plus rapides. La même technologie, appliquée à un travail où la bonne réponse n'est pas vérifiable mécaniquement et où le développeur détient déjà le contexte, a déplacé le chiffre dans l'autre sens — et a déplacé la perception des développeurs à l'opposé de la mesure.

Cette dernière partie explique pourquoi l'auto-déclaration ne constitue pas une preuve sur ce site. Les personnes de l'essai étaient expérimentées, motivées, et se trompaient sur leur propre vitesse d'environ quarante points de pourcentage.

Quatre référentiels disent la même chose depuis l'autre côté

Spider 2.0 pose des questions de données d'entreprise sur de vrais entrepôts — un millier de colonnes, plusieurs dialectes SQL, de la documentation et un dépôt de code à explorer. Un agent de code en a résolu 21,3 %, contre 91,2 % sur la version académique de la même tâche. Beaver, construit à partir de vrais journaux de requêtes d'entrepôts d'entreprise, donne zéro à un modèle de langage brut là où les référentiels publics affichent 80 à 90. Sur les 537 questions rédigées par des experts du Finance Agent Benchmark à partir de publications récentes, les meilleurs modèles restent très loin d'un analyste.

GDPval, d'OpenAI, qui rassemble de vrais livrables issus de 44 métiers et fait noter à l'aveugle les productions des modèles par des experts du secteur, rapporte le gradient directement : les taux de victoire sont les plus élevés sur les tâches de zéro à deux heures et baissent régulièrement à mesure que la tâche s'allonge. Plus une tâche dure, plus elle est faite de décisions que rien ne peut vérifier avant la fin.

Aucun de ces chiffres ne dit à quel point un modèle est intelligent. Ils disent où l'arbitre cesse de fonctionner. Quand la bonne réponse dépend de savoir quelle table de cette entreprise est la vraie, laquelle de deux définitions d'un indicateur l'entreprise utilise réellement, ou ce que le client voulait réellement dire, rien d'autre qu'une personne ne peut le dire.

Ce qui se passe quand le travail part sans arbitre

Des tribunaux fédéraux américains ont sanctionné des avocats pour des écritures appuyées sur des citations d'affaires qui n'existent pas — une amende de 5 000 dollars dans un cas, une autorisation d'exercer retirée dans un autre. Une liste de lectures d'été diffusée en syndication a paru dans le Chicago Sun-Times et le Philadelphia Inquirer avec des livres qui n'ont jamais été écrits. Les sous-titres allemands de Crunchyroll pour une première d'anime contenaient la phrase « ChatGPT a dit… ». La Cour suprême de Floride a depuis modifié ses règles pour que signer une écriture constitue en soi une déclaration sur l'autorité juridique qui y est citée.

Ce ne sont pas des ratés amusants, c'est la même structure que les réussites. Là où l'étape de contrôle était mécanique, la machine l'a faite. Là où l'étape de contrôle était une personne, et où cette personne a été retirée pour économiser l'étape de contrôle, l'erreur a atteint le monde extérieur — et un tribunal, un rédacteur en chef ou un régulateur est alors devenu l'arbitre, après coup et à un coût bien plus élevé.

Dans le travail physique, ce qui est borné et répété part en premier

La même forme apparaît hors du logiciel. La tonte est la seule tâche d'entretien des espaces verts où des machines sont désormais employées à grande échelle : l'office des parcs de Singapour dit que les entreprises paysagistes ont économisé 80 % d'heures de travail après être passées aux tondeuses robotisées autonomes, et le conseil de Nashville a passé contrat pour des tondeuses robotisées dans ses parcs. Une pelouse a des limites qu'on peut indiquer à une machine et un résultat que chacun voit. Les boissons préparées à un poste fixe sont le cas suivant : des cafés à barista robot fonctionnent commercialement en Corée du Sud, et une étude auprès de 300 de leurs clients a trouvé que l'ambiance et la nouveauté les attiraient. Couper les cheveux est l'inverse : chaque tête est différente et seule une personne dit si la coupe est juste, et les robots trouvés ne font que peigner et coiffer, l'un d'eux sur des perruques.

Dans les métiers du bâtiment, c'est l'usine qui bouge en premier

En charpenterie, le travail qui quitte le chantier part en usine, pas chez des robots de chantier. L'Agence forestière japonaise indique qu'en 2024, 94 % des maisons à ossature poteaux-poutres utilisaient des assemblages taillés en usine, et l'office statistique allemand compte comme préfabriqués en usine 22,2 % des logements achevés en 2024. L'automatisation en usine n'est pas non plus une garantie : Katerra, dont l'usine disposait de lignes d'ossature bois très automatisées, a déclaré environ 2,78 milliards de dollars de pertes avant de se placer en faillite.

Quoi en faire lundi matin

Prenez votre propre liste de travaux en attente et marquez chaque élément avec ce qui vous dirait qu'il est terminé : une coche verte qui apparaît sans vous, ou une personne qui le regarde. La première liste est celle qui est en train de devenir moins chère, quel que soit votre secteur. Savoir quelle est la longueur de cette liste à l'intérieur de votre propre métier vaut plus que n'importe quel pourcentage publié, et personne d'autre ne peut le calculer pour vous.

Regardez ensuite la seconde liste et posez une question plus dure : le contrôle que vous exercez est-il visible pour la personne qui décide de votre budget ? Le motif récurrent dans ces enregistrements, c'est que l'étape de relecture est la première coupée, parce qu'elle ne produit aucun livrable — et son absence ne se voit pas avant deux trimestres.

Tout ce qui est cité ici

Chacune ouvre le dossier complet : sa source et son rang de source, les dates, le périmètre auquel elle s'applique, qui l'a vérifiée et ce qu'elle n'établit pas.

1. Airbnb rapporte avoir migré près de 3 500 fichiers de tests de composants React d'Enzyme vers React Testing Library en six semaines, contre une estimation à la main de 1,5 année — The Airbnb Tech Blog (Airbnb's own engineering blog)
2. Amazon dit avoir fait passer des dizaines de milliers de ses propres applications Java de production de Java 8 ou 11 à Java 17 avec un agent, et estime l'équivalent manuel à plus de 4 500 années de travail de développement — AWS DevOps & Developer Productivity Blog (Amazon's own)
3. Un essai randomisé de METR portant sur 16 développeurs open source expérimentés et 246 tickets réels a trouvé qu'ils mettaient 19 % de temps en plus avec les outils d'IA du début 2025, tout en croyant avoir été 20 % plus rapides — METR — study report
4. Sur 632 flux de données d'entreprise tirés de vrais entrepôts, un agent de code en a résolu 21,3 % — contre 91,2 % sur le benchmark académique antérieur Spider 1.0 — Spider 2.0: Evaluating Language Models on Real-World Enterprise Text-to-SQL Workflows (arXiv:2411.07763)
5. Sur Beaver, un banc d'essai de langue naturelle vers SQL construit à partir de vrais journaux de requêtes d'entrepôts d'entreprise, un modèle de langue seul a obtenu zéro et un montage agentique a atteint environ 10 %, contre plus de 80 à 90 % sur les bancs d'essai publics — BLOG@CACM (Stonebraker & Chen, MIT)
6. Sur le Finance Agent Benchmark — 537 questions rédigées par des experts à partir de documents récents déposés auprès de la SEC — le meilleur modèle, o3 d'OpenAI, a atteint 46,8 % d'exactitude à 3,79 dollars la requête — arXiv 2508.00828 (Bigeard, Nashold, Krishnan, Wu)
7. Le banc d'essai GDPval d'OpenAI a recueilli de vrais livrables d'acheteurs et fait noter à l'aveugle la production des modèles par des experts du secteur face à ces livrables — GDPval: Evaluating AI Model Performance on Real-World Economically Valuable Tasks (OpenAI, arXiv:2510.04374)
8. Un tribunal fédéral américain a sanctionné deux avocats et leur cabinet de 5 000 dollars pour des écritures citant six affaires inexistantes produites par ChatGPT, en relevant qu'utiliser un outil d'IA fiable n'est pas en soi fautif — Mata v. Avianca, Inc. (S.D.N.Y., 22 June 2023) — opinion and order on sanctions, via CourtListener
9. Un tribunal fédéral du Wyoming a sanctionné financièrement trois avocats et révoqué l'admission pro hac vice de l'un d'eux après qu'une requête déposée par eux citait neuf décisions, dont huit n'existaient pas — US District Court, D. Wyo. — Wadsworth v. Walmart, 2:23-cv-118-KHR, ECF No. 181 (order of Judge Kelly H. Rankin)
10. La Cour suprême de Floride a modifié la règle 2.515(d)(2) : signer un acte de procédure revient à affirmer que les autorités juridiques citées existent et sont exactes, sous peine de sanctions, à compter du 15 juin 2026 — Supreme Court of Florida, No. SC2026-0673 — In re: Amendments to Florida Rule of General Practice and Judicial Administration 2.515 (2026-05-28)
11. Le Chicago Sun-Times et le Philadelphia Inquirer ont imprimé une liste de lectures d'été diffusée en syndication comportant des livres qui n'existent pas ; le journal a dit que le pigiste avait utilisé un outil d'IA et que la rubrique n'avait pas été relue — NBC News
12. Les sous-titres allemands de Crunchyroll pour une première d'anime contenaient la phrase « ChatGPT a dit… » ; l'entreprise a déclaré qu'un prestataire externe avait utilisé des sous-titres produits par IA en violation de son contrat — Engadget
13. Les entreprises paysagistes ont économisé 80 % d'heures de travail après être passées aux tondeuses robotisées autonomes, selon l'office des parcs nationaux de Singapour — National Parks Board (NParks), Singapore — NParks rolls out new model of greenery management for parks and streetscape that leverages suite of digital tools developed with landscape industry (29 Mar 2023)
14. Location de tondeuses robotisées pour son service des parcs approuvée par le conseil de Nashville, dans un contrat de cinq ans d'une valeur estimée à 2 000 000 $ — Metropolitan Government of Nashville and Davidson County — Resolution RS2025-1015, approving a contract with My Goat, Inc. for robotic mowers for the Department of Parks and Recreation (passed 2025-02-18; Legistar record)
15. Les clients des cafés à robots baristas en Corée du Sud étaient attirés par l'ambiance et la nouveauté, selon une enquête auprès de 300 visiteurs de quatre chaînes en activité — Kim, Yoo, Jeon (Gachon University and others) — The role of experiential value, novelty, and satisfaction in robot barista coffee shop in South Korea: COVID-19 crisis and beyond, Service Business (published 31 October 2021)
16. Un système robotisé de coiffage entraîné en simulation a transféré son savoir-faire sur des perruques, selon ses chercheurs, qui jugent les soins capillaires difficiles pour les robots en raison de la structure fine des cheveux — Zhao, Yoo, Chaudhury, Nam, Francis, Ichnowski — DYMO-Hair: Generalizable Volumetric Dynamics Modeling for Robot Hair Manipulation, arXiv 2510.06199 (7 Oct 2025)
17. La taille en usine a atteint 94 % des maisons en bois à ossature poteaux-poutres en 2024, a indiqué l'Agence des forêts du Japon dans son livre blanc — 林野庁 — 令和7年度 森林・林業白書(令和8年6月2日公表), 第III章
18. Les maisons construites en usine représentaient 22,2 % des bâtiments résidentiels achevés en Allemagne en 2024, a indiqué l'office fédéral de la statistique — Statistisches Bundesamt (Destatis) — Pressemitteilung Nr. N039 vom 28. Juli 2025
19. Une usine dotée de lignes très automatisées pour les murs à ossature bois et les fermes appartenait à un constructeur qui a perdu environ 2,78 milliards de dollars et s'est déclaré en faillite, a déclaré Katerra devant le tribunal — U.S. Bankruptcy Court, Southern District of Texas, Case 21-31861 (Katerra Inc.), Document 37 — declaration in support of Chapter 11 petitions, filed 06/07/21 (via CourtListener RECAP)
20. Faire que les gens s'en servent vraiment — tâche de Responsable du déploiement de l'IA
21. Faire que les chiffres veuillent dire quelque chose — tâche de Responsable des systèmes de gestion