Ressources · 03

Gouvernance des agents IA : guide de mise en production

Cadrer les permissions, les données, les tests, la supervision et l’arrêt d’un agent avant de lui confier un processus métier.

· 15 min

Équipe pluridisciplinaire examinant les contrôles et preuves d’un système d’intelligence artificielle

Ce que ce guide permet

  • Limiter l’agent au juste nécessaire
  • Tester les erreurs coûteuses avant le réel
  • Conserver des traces utiles sans sur-collecter
  • Maintenir une responsabilité humaine effective

Contrôle express

  • L’agent peut-il déclencher une action irréversible ?
  • Les données saisies sont-elles autorisées ?
  • Un seuil impose-t-il une validation humaine ?
  • Les outils ont-ils des permissions minimales ?
  • Peut-on arrêter et revenir en arrière rapidement ?

Méthode pas à pas

  1. 01

    Décrire le système réel

    Documentez l’objectif, les utilisateurs, les entrées, les modèles, les outils, les sorties, les dépendances et les personnes affectées.

    Livrable : fiche système versionnée.

  2. 02

    Classer actions et données

    Séparez lecture, recommandation, rédaction et exécution. Identifiez données interdites, sensibles, personnelles et soumises à conservation.

    Livrable : matrice données × actions.

  3. 03

    Réduire les permissions

    Utilisez des comptes dédiés, des listes d’outils autorisés, des environnements isolés et une validation avant toute action à impact élevé.

    Livrable : politique d’autorisation.

  4. 04

    Construire les évaluations

    Testez cas normaux, ambiguïtés, injections, données absentes, demandes hors périmètre et erreurs irréversibles. Fixez les seuils avant le pilote.

    Livrable : jeu de tests et résultats.

  5. 05

    Superviser en production

    Journalisez version, contexte utile, appel d’outil, décision de validation et résultat, tout en minimisant les données conservées.

    Livrable : tableau de suivi et alertes.

  6. 06

    Préparer l’échec

    Définissez désactivation, reprise manuelle, notification, analyse d’incident et critères de remise en service.

    Livrable : runbook incident IA.

Indicateurs de pilotage

IndicateurCe qu’il mesurePremière action
Taux de réussite utileTâches correctes selon le critère métier, pas seulement réponses plausiblesRevoir les échecs par famille de cas
Escalade humainePart des cas correctement transmis à une personneAjuster les seuils lorsque l’agent agit avec trop d’assurance
Actions annuléesActions bloquées ou reprises avant impactIdentifier les permissions trop larges et scénarios non testés
DériveÉcart de performance selon version, données ou populationComparer sur un jeu stable à chaque changement

Erreurs fréquentes

  • Mesurer uniquement la qualité rédactionnelle
  • Donner à l’agent les droits de l’utilisateur final
  • Conserver toutes les conversations par défaut
  • Modifier modèle et prompt sans rejouer les évaluations

Questions fréquentes

Quelle différence entre chatbot et agent IA ?

Un agent planifie ou enchaîne des actions et peut appeler des outils. Ce pouvoir d’action exige des permissions, validations, traces et mécanismes d’arrêt plus stricts.

Faut-il toujours une validation humaine ?

Elle est particulièrement nécessaire quand l’action est irréversible, sensible, réglementée, financière ou difficile à détecter après coup. Le niveau dépend du risque.

Que faut-il journaliser ?

La version du système, le contexte strictement utile, les appels d’outils, les validations, le résultat et les erreurs, avec une durée de conservation justifiée.