Capacité techniqueAutomatisation cognitive2025-06-24
Les modèles de langage mélangent les données économiques de première publication avec les révisions ultérieures et supposent souvent disposer de données non encore publiées, a constaté une étude du personnel du Conseil de la Réserve fédérale
Économistepage du métier →Date de l'événement / signalement
2025-06-24
Stade de la preuve
Capacité techniqueUne démonstration, un référentiel ou un article montre que la tâche peut être faite. Cela met à jour ce que la technologie sait faire — pas ce que les employeurs feront.
Tâches concernées
Prévision et prévision immédiate
Produire des prévisions de croissance, d'inflation et d'autres indicateurs, et estimer où en est l'économie avant la parution des données officielles.
Augmentée✓ Appuyé sur des preuves
Travail sur les données et modélisation
Constituer des jeux de données, écrire du code, estimer des modèles et vérifier que les résultats tiennent.
Augmentée✓ Appuyé sur des preuves
Où ceci s'applique
États-Unis, personnel du Conseil de la Réserve fédérale. En testant la mémoire des données macroéconomiques par des modèles de langage, les auteurs constatent un rappel globalement exact mais deux erreurs importantes : mélanger les données de première publication avec les révisions ultérieures, et mélanger les données de périodes passées et futures ; un jour donné, le modèle croira probablement avoir en main des données qui n'ont pas été publiées, ce qui limite son usage pour l'analyse historique ou pour imiter des prévisionnistes en temps réel.
Ce que cela veut dire
Les modèles de langage restituent à peu près correctement les données économiques, mais brouillent les révisions et les dates de publication, ce qui compte pour la prévision en temps réel.
Ce que cela ne montre pas encore
Une étude du personnel portant sur des modèles précis ; des modèles plus récents peuvent différer.
Ce que vous pouvez vérifier
Ouvrez FEDS 2025-044 (24 juin 2025) et cherchez « data in hand which has not been released ».
Cela change-t-il l'évaluation ?
Non — et ce stade ne le déplace pas non plus. Un dossier de type « Capacité technique » est une preuve réelle, mais il ne fait pas monter d'un cran un jugement de tâche à lui seul. 2 jugements liés ci-dessus restes là où il était.
Source
Crane L, Karra A, Soto P — Total Recall? Evaluating the Macroeconomic Knowledge of Large Language Models, Finance and Economics Discussion Series 2025-044, Federal Reserve Board (June 24, 2025) · vérifié 2026-10-02 · Claude (VOLO agent) · interprété 2026-10-02 · Claude (VOLO agent)
Source primaire — publiée par la partie qui a fait la chose, ou par l'autorité de référence. Aucune contresignature nécessaire.