La plupart des indicateurs d’adoption de l’IA sont peu pertinents.
« 80 % des salariés ont essayé ChatGPT. » C’est intéressant, mais ce n’est pas un ROI.
« Nous avons organisé trois ateliers sur l’IA. » C’est utile, mais cela ne mesure pas l’impact sur l’activité.
« Les collaborateurs disent gagner du temps. » C’est un signal, mais il ne suffit pas à guider les investissements.
Le ROI de l’IA doit être mesuré au niveau des processus. Quelle tâche a changé ? À quelle fréquence est-elle exécutée ? Comment sa durée a-t-elle évolué ? La qualité s’est-elle améliorée ou dégradée ? Quels risques ont été introduits ? Le nouveau comportement perdure-t-il après la disparition de l’effet de nouveauté ?
Cet article propose un modèle de mesure pratique pour les PME et les équipes.
Mesurez l’adoption de l’IA à partir des processus réellement modifiés, et non de l’enthousiasme. Un processus qui fait gagner 30 minutes chaque jour sans dégrader la qualité vaut mieux qu’une démonstration spectaculaire abandonnée après deux semaines.
Commencez par l’unité de valeur
L’unité n’est pas « l’utilisation de l’IA », mais un processus :
- Rédiger une proposition client.
- Trier un ticket d’assistance.
- Résumer une réunion et attribuer des actions.
- Extraire les champs d’une facture.
- Préparer une recherche commerciale.
- Vérifier les clauses d’un contrat.
- Générer une description de produit.
- Répondre à une question interne sur une politique.
Pour chaque processus, effectuez une mesure avant et après.
La formule du ROI
Un modèle simple :
ROI = valeur récurrente - coût récurrent - coût de maîtrise des risques
Où la valeur peut inclure :
- Temps économisé.
- Plus grande capacité de traitement.
- Temps de réponse plus rapide.
- Meilleure qualité.
- Moins d’erreurs.
- Enregistrements plus complets.
- Conversion plus élevée.
- Charge d’assistance plus faible.
Les coûts incluent :
- Licences d’outils.
- Coût API/inférence.
- Temps d’implémentation.
- Temps de vérification.
- Maintenance.
- Formation.
- Surveillance.
- Gestion des incidents.
Le coût de maîtrise des risques inclut :
- Vérification humaine.
- Examen juridique et de sécurité.
- Contrôles de gestion des données.
- Journalisation et audit.
- Gestion des mécanismes de repli.
- Vérifications de qualité.
Si le processus exige une vérification importante, intégrez-la au calcul. Un résultat d’IA qui fait gagner 20 minutes tout en ajoutant 20 minutes de contrôle ne fait pas gagner de temps. Il peut néanmoins améliorer la qualité ; l’indicateur doit alors le montrer.
La situation de référence
Avant de modifier le processus, relevez les données suivantes :
| Métrique | Exemple |
|---|---|
| Volume | 120 tickets d’assistance/semaine |
| Temps actuel | 6 minutes pour trier un ticket |
| Qualité actuelle | 8 % de tickets mal orientés |
| Délai actuel | Première orientation après un délai médian de 2 heures |
| Coût actuel | Temps du personnel et outils |
| Risque actuel | Données sensibles des clients, erreurs d’escalade |
Exécutez ensuite le processus assisté par l’IA dans le cadre d’un pilote, puis comparez.
Sans situation de référence, chaque chiffre peut servir à raconter n’importe quelle histoire.
Mesurez la qualité, pas seulement la vitesse
L’IA peut rendre le travail mauvais plus rapidement. Mesurez la qualité en parallèle :
| Processus | Indicateur de qualité |
|---|---|
| Triage des demandes d’assistance | Catégorie, priorité et escalade correctes |
| Synthèses de réunion | Exactitude des actions, des responsables et des dates |
| Recherche commerciale | Qualité et pertinence des sources, absence d’affirmations non étayées |
| Revue de contrats | Identification correcte des clauses, taux de risques non détectés |
| Extraction de facture | Précision des champs, taux d’exception |
| RAG de connaissances | Exactitude des citations et des refus |
Pour les tâches destinées aux clients, ajoutez des indicateurs de confiance : taux de réclamation, de correction et de refus, ainsi que satisfaction concernant l’escalade vers une personne.
Mesurez l’adoption au-delà du nombre d’utilisations
L’utilisation seule n’est pas suffisante. Suivez :
- Réutilisation après quatre semaines.
- Taux d’achèvement des processus.
- Taux de remplacement manuel des résultats.
- Modifications apportées par les utilisateurs après la génération.
- Reprises rendues nécessaires par les résultats de l’IA.
- Cas dans lesquels les utilisateurs évitent le processus.
- Raisons d’évitement.
Si les gens utilisent l’outil uniquement lorsqu’ils sont surveillés, il n’est pas adopté.
Niveaux de maturité
Utilisez cinq niveaux :
| Niveau | État | Preuves |
|---|---|---|
| 0 | Aucune IA gérée | Utilisation ad hoc d’outils personnels |
| 1 | Productivité individuelle | Les personnes utilisent des outils approuvés pour les brouillons et l’analyse |
| 2 | Processus reproductibles | Processus nommés, avec responsables, consignes et contrôles |
| 3 | Automatisation gouvernée | Journaux, évaluations, étapes de validation, mécanismes de repli et règles relatives aux données |
| 4 | Systèmes intégrés | IA connectée aux systèmes de référence avec surveillance |
| 5 | Portefeuille optimisé | ROI, risque, coût et qualité gérés à l’échelle de tous les processus |
L’objectif n’est pas d’atteindre le niveau 5 partout. De nombreuses équipes tirent l’essentiel de la valeur des niveaux 2 et 3. Ne progressez davantage que pour les processus dont la valeur le justifie.
Vue du portefeuille
Suivez les processus dans un portefeuille simple :
| Processus | Valeur | Risque | Maturité | Décision |
|---|---|---|---|---|
| Résumés de réunion | Moyenne | Faible | 2 | Conserver |
| Triage des demandes d’assistance | Élevée | Moyenne | 3 | Étendre avec prudence |
| Revue de contrats | Élevée | Élevée | 1 | Piloter avec un examen juridique |
| Rédaction de publications sur les réseaux sociaux | Faible | Faible | 2 | Maintenir un dispositif léger |
| Agent de remboursement client | Moyenne | Élevée | 0 | Ne pas automatiser pour le moment |
Cette vue évite l’erreur fréquente qui consiste à étendre la démonstration la plus séduisante plutôt que le processus offrant la meilleure valeur ajustée au risque.
Indicateurs avancés et retardés
Indicateurs avancés :
- Nombre de processus ayant un responsable.
- Nombre de processus disposant de mesures de référence.
- Pourcentage avec des règles de données.
- Pourcentage disposant de mécanismes de repli.
- Taux de passage des évaluations.
- Volume de la file de vérification humaine.
Indicateurs retardés :
- Heures économisées.
- Coût réduit.
- Chiffre d’affaires influencé.
- Taux d’erreur modifié.
- Temps de cycle modifié.
- Satisfaction client modifiée.
- Nombre d’incidents.
Les indicateurs avancés montrent si le dispositif d’adoption est sain. Les indicateurs retardés montrent s’il produit des résultats.
Plan de mesure sur 90 jours
Jours 1-30 : situation de référence.
- Choisissez 5 processus candidats.
- Capturez le volume, le temps, la qualité et le risque.
- Choisissez 2 pour le pilote.
Jours 31-60 : pilote.
- Exécutez le processus assisté par l’IA avec une vérification humaine.
- Mesurez le temps, la qualité, le taux de remplacement manuel et les retours des utilisateurs.
- Arrêtez ou révisez les pilotes faibles.
Jours 61-90 : décision de passage à l’échelle.
- Comparez la situation de référence aux résultats du pilote.
- Décidez : étendre, maintenir à petite échelle, réviser ou annuler.
- Ajoutez des contrôles de gouvernance aux processus étendus.
Ne qualifiez pas un pilote de réussite simplement parce qu’il a plu. Il est réussi lorsque les indicateurs du processus justifient de poursuivre.
Ne faites pas cela pour le moment
Ne comptabilisez pas les consignes envoyées comme un ROI.
Ne comptabilisez pas le temps brut économisé sans déduire la vérification et les reprises.
Ne passez pas un processus à l’échelle sans indicateurs de qualité.
Ne négligez pas le risque simplement parce que les économies de temps semblent importantes.
Ne forcez pas toutes les équipes à atteindre le même niveau de maturité.
Le message clé
Le ROI de l’IA est concret, et non mystérieux. Choisissez un processus. Mesurez son volume, sa durée, sa qualité et son risque de référence. Menez un pilote avec des contrôles. Comparez les résultats. Décidez ensuite d’étendre, de réviser ou d’arrêter.
Les entreprises qui tireront profit de l’IA ne seront pas celles qui utilisent le plus d’outils, mais celles qui transforment cet usage en améliorations gouvernées, mesurées et reproductibles de leurs processus.
