# No Finance Agent Benchmark — 537 perguntas escritas por especialistas sobre documentos recentes entregues à SEC — o melhor modelo, o o3 da OpenAI, chegou a 46,8% de acerto a 3,79 dólares por consulta

Página: https://flyvolo.ai/pt/changes/ev-20250520-financial-analyst-3
Data: 2025-05-20 · Fase: Restrição
Este registo pode alterar um juízo sobre uma tarefa? sim
Profissão: https://flyvolo.ai/pt/careers/financial-analyst

## Âmbito

Nove categorias de tarefa, da recolha de informação à modelação financeira, escritas com especialistas de bancos, fundos de cobertura e private equity; os agentes tiveram acesso ao Google Search e ao EDGAR. Apenas pesquisa sobre documentos públicos — não um analista a trabalhar dentro dos modelos e dos dados internos da sua própria casa.

## Fonte

- arXiv 2508.00828 (Bigeard, Nashold, Krishnan, Wu) — https://arxiv.org/abs/2508.00828 (fonte primária)

## O que isto significa

Os agentes tinham as ferramentas que um analista tem (a pesquisa e a base de dados de relatórios) e ainda assim acertaram menos de metade das perguntas escritas por peritos, a quase quatro dólares por consulta. Isso coloca a linha atual dentro do posto e não à sua volta: em nove categorias de tarefas, da recuperação à modelação, o melhor modelo acertou menos de metade das vezes, e o custo é uma restrição ativa em volume.

## O que ainda não demonstra

Um banco de ensaio não é um resultado de emprego, e este é apenas de relatórios públicos: nada diz sobre um analista a trabalhar dentro dos modelos da sua própria firma e com dados internos, onde o contexto é mais rico e os erros saem mais caros. Também não fica parado: mede os modelos da sua data, por isso trata os 46,8% como uma leitura datada e não como um teto.

## Como o verificar por si

Pega num modelo que mantenhas e num pressuposto lá dentro, por exemplo a taxa de crescimento. Pede a um modelo atual que derive esse número apenas a partir dos relatórios, e depois verifica cada número que ele cite contra o documento. O que estás a medir não é se soa bem, mas quantos dos seus números sobrevivem a serem seguidos até à fonte.


Mais: https://flyvolo.ai/llms.txt