Classes de modelos S/A/B/C/D

🧠 Raciocínio

Preços destes modelos no catálogo: classe S e acima · classe A e acima · classe B e acima

Por agora uma fonte - só pontuação

DeepSeek V4.1 Flash 1017 89.1, DeepSeek V4 Flash 0731 76.3, Kimi K2.7 Code 70.4, Qwen3.8 27B 63.6, DeepSeek V4 Flash 49.5, MiniMax-M2.7 47.6, MiniMax-M2.5 30.6

Como calculamos

Cada resultado de teste é posto numa escala 0-100 face aos modelos recentes mais fortes. A pontuação de uma fonte é a média dos seus testes; a da direção, a média das fontes, para que uma fonte com muitos testes não pese mais do que outra. Usa-se a variante publicada mais forte do modelo. Os limites ficam fixos por meio ano (edição 2026H2); recalcula-se quando uma fonte publica novos resultados.

Limites das classes

• S a partir de 95
• A a partir de 80
• B a partir de 62
• C a partir de 42
• D a partir de 0

Fontes

• LMArena leaderboard dataset (CC BY 4.0) - blind human preference: math, expert prompts
• Epoch AI Benchmarking Hub (own runs) (CC BY 4.0) - GPQA Diamond, OTIS Mock AIME, FrontierMath

Próximas direções: código, agentes, visão - uma de cada vez, quando cada uma tiver duas fontes independentes.

Os mesmos dados: /v1/classes (API) e a ferramenta MCP models_by_class.

Uma classe diz como um modelo pontua em testes públicos, não se serve para a sua tarefa: teste-o nos seus próprios casos.