Voici la première édition d'un rapport que nous prévoyons de mettre à jour chaque trimestre : ce que les gens demandent aux agents de code des autres, et ce qui se passe quand ils le font. Les données proviennent de la bêta privée de muti, couvrent les trente jours précédant le 6 septembre 2026, et sont limitées. Cinquante-huit requêtes, six machines, dix salles. Nous les publions malgré tout, car personne d'autre ne publie sur les agents partagés, et de petits chiffres honnêtes valent mieux que de grands chiffres inventés.
Tous les chiffres sont agrégés. Aucun texte de requête, aucun nom, aucun nom de salle.
Les chiffres
Cinq chiffres des trente premiers jours, avec leurs dénominateurs.
Ce que cela signifie selon nous
Un tiers de requêtes provenant de non-propriétaires, c'est élevé pour une bêta sans marketing. Les propriétaires ont invité des personnes et ces personnes ont utilisé l'agent. Le partage est l'essence même du produit, et cela s'est fait spontanément.
Les approbations sont rapides lorsqu'elles sont rares. Neuf approbations sur cinquante-huit requêtes, traitées en une médiane de 38 secondes. C'est exactement le comportement visé par la conception : les quatre actions qui marquent toujours une pause et les modes de permission limitent le nombre de sollicitations, de sorte que les prompts restants bénéficient d'une véritable attention. Voir les quatre actions qu'un agent devrait toujours demander avant d'exécuter.
Bash sollicite des approbations. La plupart des approbations concernaient des commandes shell. La lecture et la modification de fichiers s'exécutaient pour l'essentiel sous acceptEdits ; les moments où un humain était nécessaire concernaient les commandes. Cela correspond à ce pour quoi les modes de permission sont conçus.
Les échecs sont principalement des échecs de runtime, pas des échecs de permission. Dix requêtes ont échoué ; dans la timeline, il s'agit d'échecs de tests, d'outils manquants et d'un timeout de runtime. Aucun n'était dû à un refus d'approbation.
Quarante et une secondes, c'est la durée médiane d'une tâche. Jusqu'à présent, les requêtes adressées aux agents partagés portent sur des tâches courtes et ciblées : relance ceci, résume cela, exporte ceci. Les refactorisations longues sont rares et principalement initiées par le propriétaire.
Ce que les chiffres ne signifient pas
- Ils ne sont pas représentatifs. Six machines, principalement les nôtres et celles de nos amis. La part des requêtes de non-propriétaires diminuera à mesure que la base de propriétaires s'élargira, avant de remonter.
- L'exécution menée à terme ne garantit pas l'exactitude. « Terminé » signifie que le runtime a fini sans erreur ; la pertinence ou la qualité du résultat n'est pas mesurée ici.
- La latence d'approbation dépend du propriétaire. Neuf points de données, plusieurs propriétaires, un seul chiffre. Considérez-le plutôt comme « moins d'une minute » que comme « 38 secondes ».
Ce que nous ajouterons
Prochaine édition : catégories de requêtes (code / documents / données / fichiers), part des requêtes avec pièces jointes et latence d'approbation selon l'heure de la journée. Le tout agrégé, et toujours publié avec les dénominateurs.
Méthodologie
Les chiffres proviennent des tables mêmes sur lesquelles tourne le produit : requêtes, approbations d'outils, adhésions aux salles et événements de timeline, décomptés sur des journées en UTC. Aucun échantillonnage. Les salles et agents supprimés de manière réversible sont exclus des totaux « actuels » et inclus dans les totaux « historiques ». Le modèle d'audit est décrit dans ce qu'un journal d'audit doit consigner.
Foire aux questions
Puis-je accéder aux données brutes ? Non. Nous ne publions que des données agrégées ; les requêtes restent privées au sein de leurs salles.
Pourquoi publier avec n = 58 ? Parce que l'alternative est de ne rien publier, et parce qu'expliciter le dénominateur permet aux lecteurs d'en apprécier la portée. La prochaine édition portera sur un volume plus important, ou expliquera pourquoi ce n'est pas le cas.
À quelle fréquence ? Chaque trimestre, avec les mêmes métriques pour permettre la comparaison, accompagnées des ajouts annoncés dans l'édition précédente.
Si vous souhaitez figurer dans la prochaine édition, donnez une salle à votre agent.
Publié le