GLM 5.3 Flash
Zhipu AIOpenCode · OpenCode GoRaisonnement: élevé
GLM 5.3 Flash répond juste à environ 1 question de vocabulaire sur 10. Il réussit le mieux en kabyle. Son point faible : écrire les mots en tarifit en tifinagh. Il fait encore des erreurs en passant du tifinagh au latin (80,6 sur 100).
Rang 6 sur 9À égalité avec Claude Sonnet 5.5
Score TifinaghBench
12,0sur 100
Intervalle à 95 % : 11,3–12,7
11,7 en orthographe stricte
0–100, avec intervalle à 95 %
Score d’écriture
80,6sur 100
Intervalle à 95 % : 79,3–81,9
65,4 en orthographe stricte
Score de translittération, 0–100
Scores par dialecte et par tâche
Score obtenu dans chaque case, sur 100. La colonne de translittération mesure l’écriture, pas le vocabulaire.
Amazighe standard marocain
- Tifinagh → anglais
- 9,468 justes, 51 partielles, 881 fausses sur 1000
- Anglais → tifinagh
- 2,626 justes, 0 partielles, 974 fausses sur 1000
- Tifinagh ↔ latin
- 90,7907 justes, 0 partielles, 93 fausses sur 1000
Tarifit
- Tifinagh → anglais
- 12,086 justes, 66 partielles, 841 fausses sur 993
- Anglais → tifinagh
- 1,919 justes, 0 partielles, 974 fausses sur 993
- Tifinagh ↔ latin
- 60,6606 justes, 0 partielles, 394 fausses sur 1000
Kabyle
- Tifinagh → anglais
- 35,2294 justes, 114 partielles, 589 fausses sur 997
- Anglais → tifinagh
- 10,9109 justes, 0 partielles, 888 fausses sur 997
- Tifinagh ↔ latin
- 90,5905 justes, 0 partielles, 95 fausses sur 1000
| Tifinagh → anglais | Anglais → tifinagh | Tifinagh ↔ latin | |
|---|---|---|---|
| Amazighe standard marocain | 9,468 justes, 51 partielles, 881 fausses sur 1000 | 2,626 justes, 0 partielles, 974 fausses sur 1000 | 90,7907 justes, 0 partielles, 93 fausses sur 1000 |
| Tarifit | 12,086 justes, 66 partielles, 841 fausses sur 993 | 1,919 justes, 0 partielles, 974 fausses sur 993 | 60,6606 justes, 0 partielles, 394 fausses sur 1000 |
| Kabyle | 35,2294 justes, 114 partielles, 589 fausses sur 997 | 10,9109 justes, 0 partielles, 888 fausses sur 997 | 90,5905 justes, 0 partielles, 95 fausses sur 1000 |
Par dialecte
Tâches de sens uniquement
- Amazighe standard marocain6,0
- Tarifit6,9
- Kabyle23,1
Par tâche
- Tifinagh → anglais18,8
- Anglais → tifinagh5,1
- Tifinagh ↔ latin80,6
Notes tifinagh → anglais
Sens en texte libre, notés par le juge ou reconnus à l’identique.
- Justes
- Partielles
- Fausses
- Échouées
Amazighe standard marocain68 justes, 51 partielles, 881 fausses sur 1000
Tarifit86 justes, 66 partielles, 841 fausses sur 993
Kabyle294 justes, 114 partielles, 589 fausses sur 997
Taux d’erreur par caractère
Pour les réponses à correspondance exacte : la plus petite distance d’édition à une réponse acceptée, divisée par sa longueur. Plus c’est bas, mieux c’est ; il révèle les quasi-réussites qu’un score de 0 masque.
| Anglais → tifinagh | Tifinagh ↔ latin | |
|---|---|---|
| Amazighe standard marocain | 92,7 % | 3,7 % |
| Tarifit | 95,4 % | 25,4 % |
| Kabyle | 74,5 % | 3,1 % |
L’essai
- Protocole
- Protocole officiel
- Harnais
- OpenCode 2.0.32@opencode-ai/client 0.0.0-beta-19271
- Fournisseur
- OpenCode Go
- Juge
- Claude Haiku 5.5 (Claude Code)
- Échantillon
- 1 000 mots par dialecte, graine 1
- Taille des lots
- 100
- Sessions
- 102 de réponse, 30 de notation
- Jetons
- 212 948 en entrée · 226 739 en sortie · 1 213 801 de raisonnement
- Coût du modèle
- 0,75 $US
- Coût du juge
- 0,23 $US
- Dates
- 20 oct. 2026, 12:34 UTC → 20 oct. 2026, 13:51 UTC
- Version de la CLI
- 0.1.0
Empreintes des jeux de données
SHA-256 de chaque dictionnaire, pour vérifier l’essai une fois les jeux de données publiés.
- Amazighe standard marocain
633505d9ccd2244f9a53b64f56bd153c428cc3dbd7229066845404bf3d7c5060 - Tarifit
d144a5619aa31cc06ffcc4eb26c361c65ca2c71451dfdfbea7fa134206481c4f - Kabyle
ed3a9882ac0f4ef10630917a302fd7d9ff6ac706654bb317b94c715f6b4cf9ea