Quand le Fin AI hallucine : qui paie la mauvaise réponse du bot ?
Le Fin AI Agent promet une résolution autonome, mais une réponse inventée peut coûter cher. Voici où s'arrête Intercom et où commence votre responsabilité.
- Une hallucination du Fin AI relève rarement d'Intercom : c'est la configuration, le périmètre de sources et le contenu fourni au bot qui sont scrutés.
- Le consultant est jugé sur une obligation de moyens : garde-fous, scope des Content Sources, seuil de confiance et tests de non-régression.
- Une réponse fausse qui crée un préjudice financier au client (remboursement indu, engagement contractuel erroné) est un dommage immatériel couvert par la RC Pro.
- Documenter le paramétrage et les avertissements donnés au client est votre meilleure défense en cas de litige.
Le scénario qui réveille tous les consultants Intercom
Vous livrez un Fin AI Agent à un client e-commerce. Trois semaines plus tard, un capture d'écran circule : interrogé sur les retours, le bot a répondu qu'un remboursement intégral était possible 90 jours après l'achat, alors que la politique réelle est de 14 jours. Plusieurs dizaines de clients finaux ont obtenu gain de cause en brandissant la conversation. Votre client vous écrit : « Votre bot a engagé ma société, je vous tiens responsable. »
Ce scénario n'a rien de théorique. Le Fin AI Agent, comme tout système génératif, peut produire une réponse plausible mais fausse : c'est ce qu'on appelle une hallucination. La question juridique n'est pas « le bot s'est-il trompé ? » mais « qui répond de cette erreur, et sur quel fondement ? ». La réponse détermine si la facture atterrit chez Intercom, chez votre client, ou chez vous.
Trois acteurs, trois responsabilités distinctes
Une hallucination du Fin AI met en présence trois rôles qu'il faut soigneusement distinguer :
- Intercom (l'éditeur) : il fournit le moteur. Ses CGU excluent quasi systématiquement toute garantie sur l'exactitude des réponses générées. L'éditeur n'est pas responsable du contenu que le bot synthétise à partir des sources qu'on lui a données.
- Le client final (l'entreprise utilisatrice) : c'est lui qui exploite le bot face à ses propres clients. À l'égard du consommateur, c'est sa responsabilité contractuelle qui est engagée si le bot promet un avantage non tenu.
- Vous, le consultant : vous avez choisi les Content Sources, défini le périmètre de réponse, réglé le seuil de confiance, rédigé les instructions du bot et validé sa mise en production. C'est sur ces actes de paramétrage que votre responsabilité se joue.
Autrement dit, vous ne répondez pas du fait que l'IA puisse halluciner par nature — c'est un risque connu et accepté de la technologie. Vous répondez de la manière dont vous avez encadré ce risque.
Obligation de moyens : ce que le juge regardera
Le consultant Intercom est tenu d'une obligation de moyens, pas de résultat. Personne ne peut garantir qu'un système génératif ne se trompera jamais. En revanche, on attend de l'expert qu'il ait mis en œuvre les diligences raisonnables de la profession. En cas de litige, voici ce qui sera passé au crible :
- Le périmètre des Content Sources : avez-vous limité le bot à des sources fiables et à jour, ou laissé une base documentaire contradictoire ?
- Le seuil de confiance et le fallback : avez-vous configuré une bascule vers un humain (Inbox) quand la confiance est faible, plutôt que de laisser le bot répondre coûte que coûte ?
- Les garde-fous d'instructions : avez-vous interdit au bot d'inventer des montants, des délais ou des engagements contractuels non sourcés ?
- Les tests de non-régression : avez-vous éprouvé le bot sur un jeu de questions sensibles (retours, prix, garanties) avant la mise en production ?
- L'avertissement client : avez-vous formellement signalé que le contenu fourni par le client engageait sa propre responsabilité ?
La différence entre une faute professionnelle et un aléa technologique se mesure presque toujours à la qualité de votre paramétrage et à la traçabilité de vos décisions.
Le coût réel d'une hallucination : un sinistre chiffré
Reprenons le cas du remboursement à 90 jours. Voici une estimation du préjudice qu'un client pourrait vous réclamer :
| Poste de préjudice | Montant estimé |
|---|---|
| Remboursements indus accordés (42 clients × 130 €) | 5 460 € |
| Gestes commerciaux pour clients lésés non remboursés | 2 800 € |
| Temps interne de gestion de crise (audit, réponses) | 3 200 € |
| Reconfiguration et nouveaux tests du bot | 1 500 € |
| Préjudice d'image et frais de défense éventuels | variable |
| Total réclamé (hors défense) | ~12 960 € |
Ce sont des dommages immatériels : aucun bien n'est endommagé, mais un préjudice financier découle directement de votre prestation. C'est précisément ce que couvre une assurance RC Pro adaptée au conseil Intercom, qui prend en charge l'indemnisation due et les frais de défense, là où votre épargne personnelle absorberait sinon le choc.
Notez que le préjudice d'image, plus diffus, peut peser bien plus lourd que les montants directs : un client qui a vu son bot promettre des avantages intenables peut perdre la confiance de sa propre clientèle, et chercher à transférer une partie de cette perte sur le prestataire. C'est pourquoi le chiffrage d'un tel sinistre dépasse presque toujours la première estimation, et pourquoi une couverture des dommages immatériels est essentielle pour ce métier.
Le seuil de confiance et le fallback humain, vos vrais garde-fous
Au-delà des sources, deux réglages techniques font toute la différence entre un bot maîtrisé et une bombe à retardement. Le premier est le seuil de confiance : Fin AI peut être paramétré pour ne répondre que lorsqu'il identifie une réponse suffisamment fiable dans les Content Sources, et basculer vers l'humain dans le cas contraire. Un consultant qui laisse le bot répondre à tout, y compris quand il n'a pas la donnée, déplace le curseur du risque très loin du bon côté de la prudence.
Le second est la bascule vers l'Inbox sur les sujets sensibles. Les questions touchant aux prix, aux remboursements, aux garanties et aux engagements contractuels devraient, sur la plupart des configurations, déclencher une prise en charge humaine plutôt qu'une génération autonome. Cartographier ces sujets et les router explicitement est un acte de configuration que l'on attend de l'expert. Voici un comparatif des deux postures :
| Configuration | Risque d'hallucination préjudiciable |
|---|---|
| Fin AI répond à tout, sans seuil ni fallback | Élevé : le bot improvise sur des sujets engageants |
| Seuil de confiance + fallback sur sujets sensibles | Maîtrisé : l'humain reprend la main aux moments clés |
En documentant ces choix dans votre livrable, vous démontrez que vous avez encadré le risque conformément aux règles de l'art — un argument décisif si un litige survient.
Construire sa défense avant le sinistre
La meilleure protection se prépare en amont, pendant la mission. Quelques réflexes qui font basculer un dossier de votre côté :
- Formaliser le périmètre : indiquez par écrit que le contenu et l'exactitude des sources relèvent du client, et que vous configurez sur la base des informations qu'il fournit.
- Versionner le paramétrage : conservez les exports de configuration, les instructions du Fin AI et les listes de Content Sources à chaque livraison.
- Tracer les tests : gardez les jeux de questions testés et leurs résultats avant chaque mise en production.
- Recommander une supervision : proposez un audit des conversations à risque dans les premières semaines, et documentez si le client refuse cette prestation.
Aucune de ces diligences n'est chronophage prise isolément, mais leur absence transforme un simple aléa en faute caractérisée. Un consultant qui peut produire l'historique de ses décisions de configuration se trouve dans une position défensive bien plus solide que celui qui s'en remet à sa seule parole.
Pour les conséquences techniques d'une mauvaise intégration (fuite ou écrasement de données via une API mal configurée), la cyber-assurance complète utilement la RC Pro. Et pour comprendre l'ensemble des risques propres à votre activité, consultez la page dédiée au métier de consultant Intercom.
Questions fréquentes
Pas du seul fait de l'hallucination, qui est un risque connu de l'IA générative. Votre responsabilité s'apprécie sur la qualité de votre configuration : périmètre des sources, garde-fous, seuil de confiance et tests. Une faute de paramétrage, oui ; un aléa technologique encadré, non.
Très rarement. Les CGU d'Intercom excluent généralement toute garantie sur l'exactitude des réponses générées. L'éditeur fournit le moteur, pas le contenu ni le paramétrage, qui relèvent du client et du consultant.
Oui. Une réponse fausse qui cause un préjudice financier au client constitue un dommage immatériel. La RC Pro adaptée au conseil Intercom prend en charge l'indemnisation et les frais de défense en cas de litige.
Restreignez les Content Sources à des contenus fiables et à jour, fixez un seuil de confiance avec bascule vers l'Inbox humaine, interdisez au bot d'inventer montants et délais, et faites tourner un jeu de tests sur les sujets sensibles avant la mise en production.
Le périmètre de mission par écrit, les exports de configuration et d'instructions, les listes de sources, les résultats de tests et tout avertissement donné au client. Cette traçabilité est votre principale ligne de défense en cas de réclamation.
Souscrivez votre assurance pro en 2 minutes
Toutes nos protections pour votre activité de Consultant Intercom — attestation immédiate, sans engagement.
* Tarifs indicatifs « à partir de », selon votre profil, votre activité et les garanties choisies. · Voir la fiche Consultant Intercom →
Article rédigé et vérifié par l'équipe Insurio — Tutassûr, courtier en assurance immatriculé à l'ORIAS sous le n° 22001730. Information à caractère général ne se substituant pas aux conditions de votre contrat.