Un simple décompte de l’usage des outils ne suffit pas à établir un retour sur investissement pour l’entreprise.
« 80 % des salariés ont essayé ChatGPT. » C’est intéressant, mais ce n’est pas un ROI.
« Nous avons organisé trois ateliers sur l’IA. » C’est utile, mais ce n’est pas un impact sur l’activité.
« Les gens disent qu’ils gagnent du temps. » Un signal, mais insuffisant pour guider les investissements.
Une analyse solide du ROI de l’IA doit identifier le flux de travail concerné, ou toute autre unité convenue. Quelle tâche a changé ? À quelle fréquence est-elle exécutée ? De combien le temps a-t-il changé ? La qualité s’est-elle améliorée ou détériorée ? Quel risque a été introduit ? Le nouveau comportement perdure-t-il après la période initiale de déploiement ?
Cet article propose un modèle de mesure pratique pour les PME et les équipes.
Mesurez les flux de travail modifiés par rapport à une situation de référence, avec des contrôles de qualité et des risques, un usage durable et le coût total du service. N’inventez ni gain de temps ni période d’adoption.
Commencez par l’unité de valeur
L’unité n’est pas « l’utilisation de l’IA ». L’unité est un flux de travail :
- Rédaction d’une proposition client.
- Tri d’une demande d’assistance.
- Synthèse de réunion et attribution des actions.
- Extraction des champs d’une facture.
- Préparation de recherches commerciales.
- Révision des clauses contractuelles.
- Génération de descriptions de produits.
- Réponse à une question sur la politique interne.
Pour chaque flux de travail, mesurez avant et après.
Définissez le bénéfice net et le ROI séparément
Une structure financière courante est :
Bénéfice net = bénéfices quantifiés - coûts pertinents totaux
ROI (%) = bénéfice net / coûts pertinents totaux × 100
Le responsable financier de l’organisation doit définir la période, les bénéfices monétaires et non monétaires, la valorisation du temps de travail, les règles d’attribution, le traitement fiscal et comptable, l’actualisation ainsi que les coûts de mise en œuvre ou les coûts partagés à inclure au dénominateur. Si certains bénéfices ne peuvent pas être monétisés de manière crédible, présentez-les comme des indicateurs opérationnels au lieu de les intégrer artificiellement au ROI.
Les mesures de valeur potentielles incluent :
- Temps gagné.
- Volume traité plus élevé.
- Temps de réponse réduit.
- Qualité améliorée.
- Moins d’erreurs.
- Dossiers plus complets.
- Taux de conversion plus élevé.
- Charge d’assistance réduite.
Les coûts incluent :
- Licences des outils.
- Coût API/inférence.
- Temps de mise en œuvre.
- Temps de révision.
- Maintenance.
- Formation.
- Surveillance.
- Gestion des incidents.
Le coût du risque/contrôle comprend :
- Validation humaine.
- Revue juridique et de sécurité.
- Contrôles de gestion des données.
- Journalisation et audit.
- Gestion des solutions de repli.
- Vérifications de qualité.
Si le flux de travail exige une validation importante, intégrez-la au calcul. Une sortie d’IA qui fait gagner 20 minutes mais ajoute 20 minutes de vérification ne fait gagner aucun temps. Elle peut néanmoins améliorer la qualité, mais l’indicateur doit le montrer clairement.
La situation de référence
Avant de modifier le flux de travail, mesurez une véritable situation de référence. Les éléments ci-dessous sont des exemples de champs, pas des résultats observés :
| Métrique | Exemple |
|---|---|
| Volume | 120 demandes d’assistance par semaine |
| Temps actuel | 6 minutes par demande pour le tri initial |
| Qualité actuelle | 8 % de demandes mal acheminées |
| Délai actuel | Médiane du premier acheminement en 2 heures |
| Coût actuel | Temps de personnel et outils |
| Risque actuel | Données clients sensibles, erreurs de transfert |
Exécutez ensuite le flux de travail assisté par l’IA dans le cadre d’un pilote et comparez les résultats.
Sans situation de référence, chaque chiffre se transforme en récit.
Mesurez la qualité, pas seulement la vitesse
L’IA peut accélérer la production d’un mauvais travail. Mesurez la qualité en parallèle :
| Flux de travail | Métrique de qualité |
|---|---|
| Tri des demandes d’assistance | Catégorie, priorité et transfert corrects |
| Synthèses de réunion | Exactitude des actions, de leurs responsables et de leurs échéances |
| Recherche commerciale | Qualité des sources, pertinence, aucune affirmation non étayée |
| Revue contractuelle | Identification correcte des clauses, taux de risques non détectés |
| Extraction de factures | Exactitude des champs, taux d’exceptions |
| RAG sur une base de connaissances | Exactitude des citations, pertinence des refus |
Pour les activités en contact avec la clientèle, ajoutez des indicateurs de confiance : taux de plaintes, taux de correction, taux d’opposition et satisfaction après transfert à une personne.
Mesurez l’adoption au-delà des chiffres d’usage
L’utilisation seule ne suffit pas. Suivez :
- Usage répété après une période d’évaluation définie ; quatre semaines ne sont qu’un exemple, pas un seuil universel d’adoption.
- Taux d’achèvement du flux de travail.
- Taux d’intervention manuelle.
- Modifications apportées par les utilisateurs après la sortie de l’IA.
- Reprises causées par la sortie de l’IA.
- Cas où les utilisateurs évitent le flux de travail.
- Raisons de l’évitement.
Si l’usage n’apparaît que sous observation ou pendant un essai imposé, ne concluez pas à une adoption volontaire durable. Étudiez les règles applicables, la fréquence des tâches, les effets liés à la mesure elle-même et les raisons qui poussent à utiliser ou à éviter le flux de travail.
Niveaux de maturité
Les six niveaux ci-dessous constituent une grille interne à AI Expert OÜ, non un standard de maturité validé en externe. Adaptez-la et documentez pourquoi chaque niveau est important :
| Niveau | État | Élément probant |
|---|---|---|
| 0 | Aucune IA gérée | Utilisation personnelle ad hoc d’outils |
| 1 | Productivité individuelle | Les personnes utilisent des outils approuvés pour les ébauches et l’analyse |
| 2 | Flux de travail reproductibles | Flux nommés avec responsables, prompts et contrôles |
| 3 | Automatisation gouvernée | Journaux, évaluations, étapes de validation, repli, règles relatives aux données |
| 4 | Systèmes intégrés | IA connectée aux systèmes de référence, avec surveillance |
| 5 | Portefeuille optimisé | ROI, risques, coûts et qualité gérés sur l’ensemble des flux de travail |
L’objectif n’est pas d’atteindre le niveau le plus élevé. Ne progressez que lorsque les éléments disponibles montrent que l’intégration et la gouvernance supplémentaires sont justifiées.
Vue portefeuille
Suivez les flux de travail dans un portefeuille simple. Les lignes ci-dessous sont illustratives, et non des résultats rapportés :
| Flux de travail | Valeur | Risque | Maturité | Décision |
|---|---|---|---|---|
| Résumés de réunion | Moyen | Faible | 2 | Maintenir |
| Tri des demandes d’assistance | Élevé | Moyen | 3 | Déployer avec prudence |
| Revue contractuelle | Élevé | Élevé | 1 | Pilote avec revue juridique |
| Rédaction de publications sur les réseaux sociaux | Faible | Faible | 2 | Conserver un dispositif léger |
| Agent de remboursement client | Moyen | Élevé | 0 | Ne pas automatiser encore |
Cette vue facilite la comparaison des éléments probants et évite de généraliser une simple démonstration uniquement parce qu’elle a attiré l’attention.
Indicateurs précurseurs et indicateurs de résultat
Indicateurs précurseurs possibles :
- Nombre de flux de travail avec un responsable désigné.
- Nombre de flux de travail avec des indicateurs de référence.
- Pourcentage disposant de règles de données.
- Pourcentage disposant de chemins de repli.
- Taux de réussite des évaluations.
- Volume de la file d’attente de validation humaine.
Indicateurs de résultat possibles :
- Heures économisées.
- Coût réduit.
- Revenus influencés.
- Taux d’erreur modifié.
- Temps de cycle modifié.
- Satisfaction client modifiée.
- Nombre d’incidents.
Classez les indicateurs selon le modèle causal et la période de mesure. Les indicateurs précurseurs peuvent montrer si les contrôles et les comportements nécessaires sont en place ; les indicateurs de résultat peuvent révéler des effets opérationnels ou financiers ultérieurs. Aucun ne démontre un lien de causalité sans mécanisme d’attribution approprié.
Un plan de mesure par étapes
Étape 1 : Situation de référence.
- Choisissez un nombre raisonnable de flux de travail à évaluer.
- Mesurez leur volume, leur durée, leur qualité et leurs risques.
- Sélectionnez les pilotes à partir des éléments probants sur la valeur, la faisabilité et les risques.
Étape 2 : Pilote.
- Exécutez le flux de travail assisté par l’IA avec validation humaine.
- Mesurez la durée, la qualité, le taux d’intervention manuelle et les retours des utilisateurs.
- Arrêtez ou révisez les pilotes faibles.
Étape 3 : Décision de déploiement.
- Comparez le pilote à la situation de référence.
- Décidez s’il faut généraliser, conserver un périmètre limité, revoir ou abandonner.
- Ajoutez des contrôles de gouvernance pour les flux déployés à l’échelle.
Ne qualifiez pas un pilote de réussi simplement parce qu’il a plu. Il est réussi lorsque les indicateurs du flux de travail justifient sa poursuite.
Ne faites pas cela pour l’instant
Ne comptez pas le nombre de prompts envoyés comme ROI.
Ne comptez pas le temps brut économisé sans soustraire la validation et les reprises.
Ne généralisez pas un flux de travail sans indicateurs de qualité.
N’ignorez pas le risque parce que les gains de temps semblent importants.
Ne forcez pas chaque équipe au même niveau de maturité.
Mesurez, pilotez, comparez, décidez
Le ROI de l’IA est concret, pas mystérieux. Choisissez un flux de travail. Mesurez sa situation de référence en volume, durée, qualité et risque. Menez un pilote avec des contrôles, puis comparez. Décidez enfin s’il faut généraliser, revoir ou arrêter.
Une organisation ne peut revendiquer une valeur mesurée que si des résultats répétés issus des flux de travail et un mécanisme d’attribution adapté étayent cette affirmation. Tout calcul financier doit être validé par une personne qualifiée. Les recommandations de la FinOps Foundation sur l’économie unitaire soulignent elles aussi l’importance de relier le coût technologique à un indicateur de valeur pour l’organisation, mais chaque organisation doit définir sa propre unité et son propre calcul.
