Les agents IA ou les RAG peuvent-ils remplacer les centres de services ? ── Raisons du blocage et vraies solutions

N’est-il pas prudent de dire que l’idée de « remplacer le centre principal de réponse aux demandes de renseignements et de services par l’IA » est désormais une idée courante ? En fait, ce que je veux faire est clair. Nous voulons réduire le temps d’attente, réduire la charge de travail des opérateurs, réduire le personnel et niveler la qualité des réponses. Il n’y a aucune objection à cet objectif.

Une erreur courante est que « laisser RAG manger tout » est souvent choisi comme méthode. J’ai personnellement testé une configuration qui saisit simultanément les journaux passés, les wikis internes et l’historique des discussions, mais ce que j’ai obtenu n’était pas l’efficacité attendue, mais une production en masse de réponses apparemment inutiles.

La conclusion est claire. Un remplacement partiel est possible, mais le remplacement du SD sans conception d’opération de connaissances a une forte probabilité d’échec. Et la majorité des échecs ne sont pas dus à des erreurs de sélection de modèle. La qualité des données d’entrée et la conception des responsabilités opérationnelles sont inadéquates.

Dans le domaine du Service Desk, des réponses correctes et une auditabilité sont requises à la fois. Afin d’atteindre ces deux objectifs, la seule façon d’y parvenir est de parvenir à « des connaissances officielles approuvées et correctes pour l’organisation ».

Conclusion d’abord

Même si vous saisissez l’intégralité du journal passé, si la qualité est faible, il recherchera simplement les ordures à grande vitesse et renverra des réponses ressemblant à des ordures.
Même si toutes les informations au sein de l’organisation sont saisies, si la frontière entre formel et informel est ambiguë, elle devient un moyen de justifier des réponses incorrectes sans assumer le contexte officiel ou les règles de l’organisation.
Une structure qui ne répond qu’en termes généraux est contraire aux règles de l’organisation et ne peut être utilisée sur le terrain.
La vraie solution est de faire tourner une boucle KCS (Knowledge-Centered Service) avec l’aide de l’IA et de clarifier la qualité de la source de référence et de la personne responsable.
L’IA qui ne peut pas faire référence à des connaissances officielles approuvées ne peut pas être utilisée dans la production du Service Desk.

Pourquoi l’option “Tout mettre pour l’instant” échoue-t-elle ?

1. Les journaux de correspondance passés ne constituent pas une connaissance en premier lieu.

De nombreux journaux de demandes sont rédigés pour clôturer les tickets sur le terrain. Bien que cela soit correct en soi à des fins commerciales, cela s’avère souvent insuffisant en tant que connaissances réutilisables.

Des informations préalables sont manquantes (appareil utilisé, autorité, itinéraire de connexion, différence d’environnement).
Le but est de compléter le ticket, et dans des cas extrêmes il peut se terminer par “correspondance terminée”. Non destiné à être réutilisé.
Un mélange d’abréviations et d’expressions familières, et repose sur la connaissance tacite du responsable.
La cause première et la solution provisoire ne sont pas séparées.

Si un journal dans cet état est soumis à RAG, même si la recherche réussit, la réponse ne sera pas exacte. En effet, l’IA peut compléter de manière plausible des documents ambigus ou incompréhensibles même lorsqu’ils sont lus par des humains, ce qui entraîne la création de réponses délirantes irréalistes. Cela crée une situation problématique dans laquelle la réponse est rapide mais le problème n’est pas résolu. Même si vous pensez que l’invite est mauvaise et que vous essayez de la régler aussi fort que possible, cela finira probablement en vain. Au moins, ça m’est arrivé.

2. La saisie complète des informations internes entraîne une « dilution officielle »

La configuration qui permet aux utilisateurs de lire « tous les wikis internes », « tous les serveurs de fichiers » et « tous les journaux de discussion » est complète à première vue. Cependant, en réalité, cela revient à organiser des informations avec différents degrés de fiabilité sur le même écran de recherche.

Généralement, ce qui suit se produit :

Les procédures officielles (approuvées) et les notes personnelles (non approuvées) sont recherchées dans la même colonne
Des procédures obsolètes demeurent et sont en conflit avec les dernières procédures
Le savoir-faire temporaire est présenté à tort comme une procédure permanente
Une inversion se produit lorsque la date et l’heure de mise à jour de l’article sont nouvelles mais que le contenu est ancien.

RAG est doué pour “trouver des documents”. Cependant, un système distinct doit être créé pour garantir que le document est correct pour l’organisation.

3. Les généralisations sans connaître les règles organisationnelles ne peuvent pas être utilisées même si elles sont correctes.

Les IA dont les connaissances formelles sont insuffisantes renvoient souvent des réponses techniquement correctes mais irréalisables sur le plan opérationnel.

Accorder les privilèges d’administrateur local
Assouplissement temporaire des paramètres de sécurité
Utilisation d’un cloud externe à la discrétion individuelle
Accès direct aux données transversales

Même si l’IA renvoie une solution générale, celle-ci sera impossible à mettre en œuvre si elle viole les règles d’organisation. À l’heure actuelle, l’IA du Service Desk pourrait même devenir un dispositif justifiant le non-respect des règles. Il ne peut pas être utilisé comme solution à des problèmes commerciaux.

Exemples de pannes qui surviennent sur site

Exemple d’échec 1 : erreur de direction due à un échec de connexion VPN

Symptôme : “Impossible de se connecter au VPN depuis la maison”
Réponse AI : “Veuillez initialiser les paramètres réseau du système d’exploitation et redémarrer.”
Réel : la cause est la révocation du certificat du côté de l’infrastructure d’authentification et elle ne peut pas être résolue du côté de l’utilisateur.

pourquoi t’es-tu réveillé ? En effet, les journaux passés contenaient de nombreux « dysfonctionnements temporaires des appareils personnels » et l’IA y était attirée. De plus, la procédure pour « isoler les défaillances du côté service » était de connaissance officielle faible, de sorte qu’elle n’a pas été classée parmi les meilleurs candidats. De plus, le contexte organisationnel de la question « Est-il acceptable que les utilisateurs réinitialisent les paramètres NW sans autorisation ? » n’est pas pris en compte dans la réponse.

Exemple d’échec 2 : proposition de violation des réglementations dans une application logicielle

Symptôme : “Je souhaite utiliser des outils d’analyse”
Réponse de l’IA : “Téléchargez vous-même la version d’essai et commencez à l’utiliser.”
En pratique : les achats, la gestion des licences et le contrôle des bagages à main sont essentiels pour les organisations.

pourquoi t’es-tu réveillé ? En effet, les documents officiels sur les flux de passation des marchés ont été enterrés en faisant référence à des articles généraux externes et à des notes personnelles. Il s’agit d’un exemple typique de l’incapacité de séparer « ce qui peut être fait » de « ce qui est acceptable de faire ».

Exemple d’échec 3 : même question, la réponse change à chaque fois

Symptôme : « Quelles sont les étapes à suivre pour configurer le transfert d’e-mails ? »
Réponse IA : Cela dépend du jour
Actual : l’ancienne page de procédure d’exploitation et la nouvelle page de procédure coexistent

pourquoi t’es-tu réveillé ? En effet, il n’y avait aucune métadonnée indiquant la « version valide » (date de début valide, date de suppression, approbateur) et les réponses variaient dans les classements de recherche. Lorsque des e-mails personnels et des extraits de chat sont mélangés, la probabilité qu’une explication informelle soit classée plus haut par hasard augmente.

Alors que faire : exécuter la boucle KCS avec l’aide de l’IA

La vraie solution n’est pas de remplacer le KCS par l’IA. Accélérer KCS avec l’IA.

Qu’est-ce que le KCS ?

KCS (Knowledge-Centered Service) est un concept opérationnel qui enregistre les connaissances générées dans le domaine de la réponse aux demandes, les réutilise et continue de les améliorer. L’important n’est pas « d’écrire un document après avoir résolu le problème », mais d’intégrer la mise à jour des connaissances dans l’acte de résoudre le problème lui-même. La raison pour laquelle le KCS est réévalué à l’ère RAG est simple : la qualité de la destination de recherche détermine en grande partie la qualité des réponses.

Histoire courte : Vieille histoire, mais efficace.

KCS est une idée qui a débuté en 1992, bien plus ancienne que l’IA. Toutefois, si cette mesure est actuellement efficace, c’est parce que les problèmes sur le terrain n’ont pas fondamentalement changé.

Il y a un journal, mais je n’arrive pas à le lire.
Il existe un document, mais je ne connais pas la version officielle.
Non mis à jour et pourrit

Lorsque l’on inclut la génération IA, ces trois éléments ont tendance à s’amplifier plutôt qu’à disparaître. C’est pourquoi il est logique de revenir au moule KCS simple mais incassable avant de nouvelles fonctionnalités flashy.

Configuration minimale pour le fonctionnement du KCS

« Capture » : structurez et enregistrez les symptômes, les causes, les contre-mesures et les conditions applicables lors de la réponse aux demandes de renseignements.
« Structure » : créez un modèle et rendez les conditions environnementales, la plage cible et les interdictions obligatoires.
Réutiliser : reportez-vous à la demande suivante et présentez la réponse et l’URL de base sous la forme d’un ensemble
« Améliorer » : refléter les différences dans le fonctionnement réel et continuer à corriger les mots ambigus et les anciennes procédures

Boucle de production : nourrir les réponses de l’IA avec des connaissances officielles

Sur le terrain, il est réaliste d’élargir progressivement le champ d’application dans la prochaine boucle.

L’utilisateur demande d’abord à l’IA
Si l’IA ne résout pas le problème, contactez Service Desk (SD).
Convertissez les enregistrements de correspondance SD en connaissances à l’aide de modèles adaptés à la lecture par l’IA
Ajoutez uniquement des connaissances officielles approuvées et révisées aux sources de données de référence sur l’IA
Le taux de réponse principal et le taux de réponses correctes de l’IA augmentent avec des demandes similaires

Le point clé de cette boucle est l’accumulation de connaissances qui peuvent être utilisées pour « l’approbation » ou des réponses officielles, plutôt que pour la « quantité ». Faites uniquement des « informations approuvées », et non des « informations enregistrées », la source de données de l’IA. Si cela n’est pas respecté, l’éventail des réponses s’élargira, mais pas l’exactitude.

Domaines qui peuvent être laissés à l’IA

Clustering de requêtes similaires
Génération de projets de réponses (avec preuves)
Signaler les éléments manquants (« Le système d’exploitation cible est inconnu », « Les prérequis de l’autorité ne sont pas indiqués », etc.)
Présentation des candidats à l’intégration des connaissances dupliquées

Domaines où les humains devraient être responsables

Jugement officiel/informel
Approbation des procédures et décision de les supprimer
Autoriser la gestion des exceptions
Gestion de l’expiration des connaissances

Même si vous essayez de laisser cela à l’IA, celle-ci ne pourra pas répondre correctement.

Points pratiques

Les points suivants doivent être gardés à l’esprit dans la pratique.

Côté exploitation des connaissances

Définir qui créera et publiera quel type de connaissances officielles et quand, et décider du système de création et d’assurance qualité.
Définissez qui peut consulter les connaissances et décider des contrôles d’accès.

Côté IA

Demandez explicitement aux élèves de justifier leurs réponses dans l’invite.
N’autorisez pas l’utilisation de sources non officielles/non autorisées dans la génération de réponses.

Fonctionnement amélioré

Déterminer les moyens de collecter les réponses incorrectes de l’IA et intégrer la génération de connaissances à améliorer dans les opérations normales.

Ces trois points peuvent paraître abstraits, mais ils font la différence une fois mis en œuvre. Les équipes qui décident « qui sera responsable » s’améliorent rapidement, tandis que les équipes qui ne prennent pas de décisions à plusieurs reprises commettent les mêmes erreurs.

La réponse à la question « Peut-il être remplacé ? »

Si vous me demandez si un service desk peut être remplacé à 100 % par un agent IA, la réponse actuelle est « non ». Cependant, si vous décomposez les types d’enquêtes et établissez une opération qui clarifie les responsabilités en matière de connaissances, La présentation des réponses principales, des conseils fixes et des procédures standard peuvent être entièrement remplacées.

En d’autres termes, le problème n’est pas l’intelligence de l’IA elle-même.

Quelles connaissances adopter en tant qu’officiel ?
Qui garantit la qualité ?
Qui t’arrêtera si tu fais une erreur ?

Seules les organisations capables de concevoir ces trois points seront capables de transformer les agents IA d’un « simple outil de discussion rapide » à une « force commerciale ». À l’inverse, une organisation qui ne dispose pas d’une opération de connaissances officielle approuvée ne sera pas en mesure de créer un centre de services de qualité, aussi sophistiqué que soit le modèle.

résumé

L’idée selon laquelle « si vous incluez tous les journaux, vous deviendrez plus intelligent » est une illusion. La véritable raison pour laquelle l’IA du Service Desk est bloquée n’est pas la quantité de connaissances, mais le manque de gouvernance des connaissances.

Ce que nous devons faire maintenant, ce n’est pas une automatisation totale. Il s’agit d’une opération discrète qui utilise l’assistance de l’IA pour exécuter la boucle KCS et cultiver les connaissances officielles.

À mesure que les organisations commencent à accepter cette modestie, la qualité de leurs réponses change visiblement. Lorsque vous utilisez l’IA dans un centre de services, la priorité absolue est toujours la même. **Développer en permanence des connaissances officielles approuvées et institutionnellement correctes. **