← Documentation
Bench mono-agent vs multi-agent
Mesures reproductibles sur 3 cas (petit / moyen / gros), tests réels
via POST /api/gaadji/code-files (mono) et
POST /api/gaadji/multi-agent/start (multi).
Résultats (Claude Haiku 4.5 + DeepSeek code/test)
| Cas | Mode | OK | Latence | Coût | Fichiers |
|---|---|---|---|---|---|
| Petit (calculator + tests) | mono | ✓ | 4,6 s | $0,0046 | 2 |
| Petit (calculator + tests) | multi | refus volontaire | 2,8 s | $0,0015 | 0 |
| Moyen (Todo API FastAPI) | mono | ✓ | 10,6 s | $0,012 | 8 |
| Moyen (Todo API FastAPI) | multi | ✓ | 37,2 s | $0,022 | 4 |
| Gros (Blog + auth JWT) | mono | INVALID_JSON | 17 s | $0,021 | 0 |
| Gros (Blog + auth JWT) | multi | ✓ | 95,7 s | $0,13 | 11 |
Lecture
- Petit (≤ 2 fichiers) → mono. 4× plus rapide, 4× moins cher. Le multi refuse de toute façon (volontaire — orchestrateur).
- Moyen (4-8 fichiers) → mono gagne sur coût/latence. Multi seulement si on veut un plan d'architecture explicite.
- Gros (10+ fichiers) → multi obligatoire. Mono tronque ou échoue (cap 5 fichiers). Multi délivre le périmètre complet pour ~$0,10-0,40.
Économie totale du bench
3 runs mono : $0,035 — 3 runs multi : $0,143. Le multi reste loin du cap par défaut ($0,50), marge confortable jusqu'à des projets ~30-40 fichiers.
Multi-provider Claude + DeepSeek
Sur le moyen Todo, basculer les agents code/test de Claude Haiku vers DeepSeek-Coder : coût passe de $0,052 à $0,022 (×2,3 économie). Qualité identique (0 issue static_checker, 100% des hints retrouvés).
Configurable via GAADJI_CODE_PROVIDER=deepseek et
GAADJI_TEST_PROVIDER=deepseek côté serveur. Claude reste
sur orchestrateur + plan + reviewer (raisonnement architectural et JSON
strict).
Coûts typiques en agent autonome
- Question simple (1 tool call Read + résumé) : ~$0,005
- Fix bug (3-5 tool calls Read/Edit/Bash) : ~$0,02-0,05
- Création de feature complète (10-20 tool calls) : ~$0,10-0,25
- Refactor large workspace (50+ tool calls, Claude Sonnet) : ~$1-3
Voir aussi : Architecture multi-agent · Tutoriel