Benchmarks do GLM
Resultados oficiais de benchmarks dos modelos GLM: 17 testes de programação, cibersegurança e agentes, citados de relatórios públicos dos autores, comparáveis a Claude, GPT, Kimi e DeepSeek.
Benchmarks do GLM 5.3: longo prazo e segurança
Dados publicados pela documentação oficial da Zhipu e pelo avaliador independente Artificial Analysis. O glmmodel.cn apenas os reproduz.
CyberGym
Descoberta de vulnerabilidades em código-fonte
Z.ai Code Bench
Codificação agêntica: mais precisão com menos tokens
Terminal-Bench 3.0
Tarefas de agentes em terminal (GLM-5.2: 4,6)
O GLM-5.3 supera o GLM-5.2 no Terminal-Bench 3.0 (4,6→28,3), DeepSWE v1.1 (46,2→66,9) e Agents’ Last Exam (23,8→28,5), alcançando o SOTA open source; no ExploitBench mais que dobra o GLM-5.2 (54,4 %). O GLM-5.3-Flash pontua 57 no índice da Artificial Analysis (n.º 4 global), empatado com Claude Opus 4.8.
GLM-5.3 vs modelos comparados — benchmarks
Resultados de benchmark publicados para modelos GLM, cobrindo 17 avaliações de 8 modelos.
| Benchmark | GLM-5.3 | GLM-5.2 | Kimi K3 | DeepSeek-V4-Pro | Qwen3.8-Max | Opus 4.8 | Fable 5 | GPT-5.6 Sol |
|---|---|---|---|---|---|---|---|---|
| Codificação | ||||||||
| Terminal-Bench 2.1 | 88.2 | 81.0 | 88.3 | 87.9 | 86.6 | 85.0 | 88.0 | 88.8 |
| Terminal-Bench 3.0 | 28.3 | 4.6 | 17.4 | – | – | 21.1 | 33.7 | 34.6 |
| DeepSWE v1.1 | 66.9 | 46.2 | 67.5 | 62.7 | 56.6 | 58.0 | 69.7 | 72.7 |
| NL2Repo | 58.0 | 48.9 | 58.0 | 61.1 | 55.9 | 69.7 | – | – |
| ProgramBench (Almost Solved) | 19.0 | 9.5 | 17.5 | – | 10.5 | 15.5 | 33.0 | 23.0 |
| FrontierSWE | 78.1 | 67.5 | – | – | – | 66.5 | 88.2 | – |
| SWE-Marathon v1.1 | 42.5 | 19.4 | 48.1 | – | – | 48.8 | 33.1 | 42.5 |
| PostTrainBench | 39.8 | 31.7 | 32.0 | – | – | 32.9 | 41.8 | 36.2 |
| Cibersegurança | ||||||||
| CyberGym | 84.5 | 77.2 | 80.0 | 83.3 | 78.5 | 78.1 | 83.8 | 83.6 |
| ExploitGym 2h / 6h | 105 / 130 | 29 / 39 | 36 / 70 | – | 14 / 26 | 80 / 120 | 181 / 247 | 216 / 293 |
| ExploitBench | 54.4 | 24.4 | 32.2 | – | 28.8 | 40.0 | 78.0 | 76.5 |
| Agentes | ||||||||
| Toolathlon Verified | 73.0 | 59.9 | 76.5 | 74.1 | 72.5 | 76.2 | 74.7 | 74.9 |
| AutomationBench v1.0.6 | 48.2 | 26.2 | 46.7 | 43.2 | 39.8 | 41.0 | 46.2 | 45.8 |
| Agents' Last Exam (ALE-CLI) | 28.5 | 23.8 | 27.6 | 25.7 | 27.0 | 25.7 | 23.8 | 28.6 |
| HLE w/ Tools | 62.5 | 54.7 | 59.8 | 60.0 | 56.2 | 57.9 | 63.9 | 64.5 |
| GDPval-AA v2 | 1769 | 1508 | 1682 | 1590 | 1739 | 1588 | 1743 | 1730 |
Fonte: blog oficial da Z.ai (14/08/2026).