Avaliações viram o gargalo da difusão
A redução de custo e o avanço dos modelos deslocam a discussão de capacidade para implementação. Aaron Levie argumenta que empresas precisam de avaliações específicas por fluxo de trabalho, não apenas benchmarks públicos.
A oportunidade para IA aplicada está em transformar inteligência barata em processos verificáveis; sem medição, a automação continua baseada em impressão.
AI diffusion is far more rate limited by having good evals than most realize. The kind of evals that you see for every model release are incredibly helpful, but only tell you the shape of general AI progress and the relative capability level of models. The far bigger space over time are evals on all the major workflows that enterprises do, down to the specifics of an individual company. This will be a huge space over time because you can’t automate what you can’t assess the progress on. Enterprises will not be able to go just on vibes.








