How to Know When an AI Agent Can Work Unsupervised — Evan Kormos, Coinbase

Evan Kormos (Coinbase) explique comment faire entrer des agents dans des processus réglementés : modéliser les flux, fiabiliser les contrôles, puis passer de la supervision totale à la gestion des seules exceptions.

Dans cette intervention d'environ 17 minutes à la conférence AI Engineer, Evan Kormos, fort de quinze ans dans les services financiers et aujourd'hui chez Coinbase, propose une méthode pour confier du travail à des agents dans des environnements régis par des politiques strictes. Il part d'une idée simple : la politique d'une entreprise était déjà, avant l'IA, une forme de « prompt système ».

Du contrôle total aux exceptions

Il décrit les processus sous forme de graphes orientés et de boucles, insiste sur le fait qu'une boucle ne vaut que par la vérification qui la clôt, et montre comment évaluations et traces deviennent un nouveau moyen d'établir la confiance. Les agents progressent ensuite en trois étapes : entièrement supervisés, puis contrôlés par échantillonnage, et enfin laissés autonomes, les humains n'intervenant plus que sur les cas d'exception.