De nombreuses entreprises entament leur adoption de l'intelligence artificielle par un test en apparence simple. Une équipe met en place un modèle de langage, développe un assistant interne ou automatise une partie du service client. Durant les premières semaines, les coûts restent maîtrisés grâce au faible nombre d'utilisateurs, au faible volume de requêtes et à une architecture encore limitée. Le projet s'avère prometteur, l'organisation décide de l'étendre et d'autres services commencent à solliciter leurs propres solutions.
Puis, de nouveaux agents, intégrations, sources documentaires, appels de modèles, services cloud et processus automatisés font leur apparition. Ce qui n'était au départ qu'un test isolé se transforme progressivement en une nouvelle couche technologique pour l'entreprise. Le problème, c'est que les dépenses ne progressent pas toujours de manière linéaire et qu'il est difficile de les imputer à un produit, un client ou un service en particulier.
L'intelligence artificielle peut générer une valeur extraordinaire, mais elle introduit également une structure de coûts différente de celle des logiciels traditionnels. C'est pourquoi les organisations ont besoin d'une discipline capable de relier la consommation technologique, l'architecture et les résultats commerciaux. Cette discipline est FinOps pour l'IA.
inOps est un modèle opérationnel et une pratique culturelle visant à maximiser la valeur commerciale tirée de la technologie. Son principe fondamental est de réunir les équipes d'ingénierie, de finance, de produit et commerciales afin de prendre des décisions éclairées par les données concernant les investissements, la consommation et l'optimisation. Il ne s'agit pas seulement de réduire les coûts, mais de comprendre quelles dépenses créent de la valeur et lesquelles représentent un gaspillage.
Le cadre développé par la Fondation FinOps a évolué, passant d'une approche centrée sur l'infrastructure cloud à une vision plus globale de la gestion de la valeur technologique. Les mises à jour récentes intègrent plus clairement des catégories telles que les logiciels, les centres de données, les licences et l'intelligence artificielle, tout en renforçant le lien entre les investissements technologiques et les priorités de la direction.
Appliquée à l'IA, la FinOps cherche à répondre à des questions auxquelles de nombreuses entreprises ne peuvent toujours pas répondre avec précision : combien coûte chaque cas d'utilisation, quel modèle offre le meilleur rapport qualité-prix, quels agents consomment le plus de ressources, quelle part des dépenses correspond à l'expérimentation et quels avantages concrets l'entreprise en retire.
Sur une plateforme SaaS classique, le coût est généralement calculé par utilisateur, par forfait ou par abonnement mensuel. Bien que des frais variables puissent exister, l'entreprise connaît généralement le prix approximatif avant d'augmenter le nombre d'utilisateurs. En IA générative, le coût peut dépendre des jetons d'entrée et de sortie, de la taille du contexte, du nombre de requêtes, du modèle sélectionné, de l'infrastructure d'inférence, du stockage, des recherches vectorielles et des appels à des outils externes.
Deux utilisateurs utilisant le même agent peuvent générer des coûts très différents. Une requête brève nécessitant une réponse simple ne consomme pas autant de ressources qu'une analyse de centaines de pages accompagnée de multiples recherches, vérifications et appels à d'autres systèmes.
L'architecture influe également sur le coût. Un agent qui tente d'accomplir une tâche en dix étapes peut coûter plusieurs fois plus cher qu'un agent capable d'obtenir le même résultat en trois étapes. Par conséquent, le coût ne peut être analysé uniquement d'un point de vue financier. Il est nécessaire de comprendre comment le système a été conçu et quelles décisions techniques déterminent chaque unité de consommation.
Le débat sur les coûts de l'IA se concentre souvent sur les jetons, car ils constituent une unité visible et relativement facile à mesurer. Cependant, une application d'entreprise comprend de nombreux autres composants. Elle peut avoir besoin d'extraire des documents, de générer des données intégrées, d'interroger des bases de données vectorielles, de stocker des conversations, d'exécuter des fonctions, de maintenir des environnements de test, d'appliquer des filtres de sécurité et d'assurer la traçabilité.
Il existe également des coûts liés au personnel. Les équipes doivent concevoir les invites, préparer les données, évaluer les réponses, corriger les erreurs, gérer la sécurité et assurer la maintenance des intégrations. Une solution qui paraît peu coûteuse en théorie peut s'avérer onéreuse lorsqu'elle nécessite une intervention humaine constante pour corriger les résultats.
Google Cloud recommande d'évaluer le coût des systèmes d'IA tout au long de leur cycle de vie, de la préparation des données et de l'entraînement à l'inférence, la surveillance et l'amélioration continue. AWS suggère également que l'optimisation prenne en compte la sélection du modèle, l'infrastructure, les données et les opérations, et pas seulement le coût de chaque appel.
L'entreprise doit calculer le coût total de possession. Le prix du modèle ne représente qu'une partie du calcul.
L'une des décisions ayant le plus d'impact sur les coûts est le choix du modèle. Face à une nouvelle application, les équipes peuvent être tentées d'opter pour le modèle le plus avancé, car il offre de meilleurs résultats lors des évaluations globales. Cependant, tous les processus ne requièrent pas une capacité de raisonnement maximale.
La classification des requêtes, l'extraction des champs d'une facture, la détection des intentions ou la synthèse de messages courts peuvent être réalisées avec des modèles plus légers et plus économiques. Réserver des modèles à plus grande capacité aux tâches complexes vous permet de maintenir la qualité là où elle est vraiment essentielle, sans surcoût pour chaque interaction.
Le guide d'architecture AWS recommande de choisir les modèles d'inférence et l'infrastructure en fonction des besoins réels de précision et de performance, en évitant de payer pour des fonctionnalités qui n'apportent pas une valeur ajoutée proportionnelle. Cela implique d'évaluer les modèles avec vos propres données et scénarios, et non pas seulement de se fier aux classements publics.
La question pertinente n'est pas de savoir quel modèle est le plus performant, mais lequel offre le niveau de qualité, de latence, de sécurité et de coût requis pour une fonction métier spécifique. L'efficacité commence par l'attribution de chaque problème au modèle approprié.
Une architecture mature n'a pas besoin d'utiliser le même modèle pour chaque tâche. Elle peut intégrer un système de routage qui analyse chaque requête et la dirige vers l'option la plus appropriée. Les requêtes simples sont traitées par des modèles plus économiques, tandis que les cas ambigus ou à fort impact sont acheminés vers des modèles à plus grande capacité.
Cette approche peut également inclure une mise à l'échelle progressive. Le système démarre avec une option moins coûteuse et n'utilise un modèle plus avancé que lorsque la réponse initiale ne satisfait pas à un seuil de confiance ou de qualité défini. Ainsi, l'entreprise évite de payer le tarif le plus élevé pour des requêtes qui ne le nécessitent pas.
Le routage doit être conçu avec soin, car l'ajout d'étapes inutiles peut accroître la consommation de ressources. Son objectif n'est pas de construire une architecture sophistiquée pour le simple plaisir de l'être, mais de trouver la combinaison minimale de composants permettant de maintenir la qualité attendue.
L'optimisation véritable ne consiste pas à toujours utiliser le modèle le moins cher. Il s'agit d'attribuer le coût approprié à chaque niveau de complexité, de risque et de valeur commerciale.
Les modèles modernes permettent de traiter des contextes de plus en plus vastes. Cette capacité est utile pour analyser des contrats, des historiques, des documents et de grandes bases de connaissances. Cependant, l'envoi d'un plus grand nombre d'informations ne garantit pas automatiquement une meilleure réponse. Dans de nombreux cas, cela augmente les coûts, allonge la latence et peut introduire des données non pertinentes qui nuisent à la précision.
Une application RAG mal conçue peut récupérer un trop grand nombre de fragments de documents à chaque requête. Un agent pourrait récupérer l'intégralité de l'historique des conversations alors qu'il n'a besoin que des derniers messages. Un assistant interne pourrait envoyer des politiques complètes alors que la question porte sur une procédure spécifique.
L'approche FinOps pour l'IA exige une analyse de la qualité du contexte. Combien de documents sont réellement nécessaires ? L'information peut-elle être synthétisée ? Existe-t-il des résultats pouvant être stockés temporairement ? La même information est-elle répétée à chaque appel ?
Réduire le nombre de jetons ne signifie pas supprimer des informations sans discernement. L'objectif est de fournir au modèle le contexte précis dont il a besoin. Un contexte mieux choisi permet de réduire les coûts tout en améliorant la qualité de la réponse.
De nombreuses applications d'entreprise reçoivent constamment des requêtes similaires. Politiques internes, informations produits, procédures de retour et questions opérationnelles sont des sujets fréquemment abordés par les utilisateurs. Si le système relance l'intégralité du flux de travail d'IA à chaque fois, l'entreprise paie à répétition pour obtenir des résultats quasi identiques.
La mise en cache permet de réutiliser les réponses, les fragments récupérés ou les résultats intermédiaires lorsque les conditions le permettent. Elle peut également préserver les instructions longues ou le contexte récurrent entre les requêtes, selon les capacités du fournisseur et l'architecture utilisée.
Toutefois, le stockage des réponses exige des règles claires. Des données financières ou d'inventaire peuvent rapidement devenir obsolètes, tandis qu'une explication d'une politique stable peut être réutilisée plus longtemps. L'entreprise doit définir quel contenu peut être stocké, pendant combien de temps et dans quelles conditions il doit être régénéré.
La mise en cache n'est pas qu'une simple optimisation technique. C'est un choix entre fraîcheur et risque. Utilisée correctement, elle réduit le nombre d'appels, améliore la vitesse et évite de payer plusieurs fois pour le même travail de calcul.
Le coût par consultation n'est pas équivalent au coût par résultat.
Une application peut afficher un coût par interaction très bas tout en générant un faible retour sur investissement. Par exemple, un commercial pourrait traiter des milliers de prospects pour quelques centimes chacun, mais générer des opportunités de faible qualité et alourdir la charge de travail de l'équipe. Dans ce cas, le coût technique paraît avantageux alors que le résultat commercial est négatif.
L'indicateur pertinent doit mettre en relation les dépenses et la valeur. En service client, on peut analyser le coût par cas résolu sans intervention humaine. Dans le domaine des ventes, le coût par prospect qualifié. Dans les opérations, les économies réalisées par processus finalisé. Dans le développement, le coût par modification déployée de manière cohérente.
La Fondation FinOps concentre ses travaux sur l'IA sur l'évaluation des investissements et la gouvernance des dépenses à grande échelle, reliant la visibilité technique aux résultats commerciaux.[5] Cette approche empêche l'organisation de se réjouir des réductions de jetons tout en perdant de vue l'objectif initial.
Optimiser l'IA signifie améliorer le rapport coût-bénéfice, et pas seulement réduire la facture mensuelle.
Lorsque plusieurs services utilisent le même compte, modèle ou infrastructure, la facture totale n'indique pas quel produit, agent ou équipe est à l'origine des dépenses. Sans attribution, le service financier constate une augmentation constante des dépenses, et les responsables informatiques ne peuvent identifier les points à améliorer.
L'architecture doit intégrer des étiquettes, des projets, des centres de coûts ou des clés distinctes permettant d'associer la consommation à des domaines, des produits et des cas d'utilisation. Dans les applications multi-utilisateurs, il peut également être nécessaire de mesurer les dépenses par client, fonction ou type de processus.
Cette visibilité vous permet de répondre à des questions essentielles. L'assistant commercial coûte-t-il plus cher que les économies qu'il génère ? Quel client consomme une quantité disproportionnée de ressources ? Quel agent a augmenté ses dépenses après une mise à niveau ? Quelle équipe maintient des projets expérimentaux qu'elle n'utilise plus ?
L'attribution ne vise pas à instaurer une culture de la sanction, mais à faciliter la prise de décisions éclairées. Lorsque les équipes comprennent l'impact financier de leurs conceptions, elles peuvent participer activement à l'optimisation et mieux justifier les investissements qui génèrent une réelle valeur ajoutée.
Les budgets et les alertes doivent être activés avant la réception de la facture.
Attendre la fin du mois pour constater une hausse des coûts est particulièrement risqué avec des charges de travail d'IA variables. Une modification de produit, un cycle au sein d'un agent ou une campagne réussie peuvent multiplier la consommation en quelques heures seulement.
Les entreprises ont besoin de budgets, d'alertes et de limites fonctionnant en temps quasi réel. Ces mécanismes de contrôle peuvent être déclenchés lorsque les dépenses dépassent les prévisions journalières, lorsque le coût moyen par transaction augmente ou lorsqu'un agent effectue plus d'étapes que d'habitude.
Microsoft, AWS et Google proposent des outils pour analyser, surveiller et optimiser les dépenses liées au cloud, mais leur efficacité dépend de la configuration par l'organisation d'indicateurs relatifs à ses propres produits et processus.[6] Une alerte générale concernant le compte risque d'arriver trop tard si elle ne précise pas quelle application est à l'origine de la modification.
L’objectif n’est pas de stopper systématiquement toute innovation en cas d’augmentation de la consommation. Il s’agit de détecter rapidement si cette augmentation correspond à une plus-value, à une variation attendue ou à un problème technique à corriger.
Les équipes d'ingénierie surveillent généralement la latence, les erreurs, la disponibilité et la qualité des réponses. Le service financier, quant à lui, suit les factures, les budgets et les écarts de dépenses. Lorsque ces indicateurs sont gérés de manière cloisonnée, l'entreprise perd en vision d'ensemble.
Une latence réduite peut avoir nécessité un modèle beaucoup plus coûteux. Une diminution des dépenses peut s'accompagner d'une baisse de la précision. Un agent peut être capable de traiter davantage de tâches, mais cela peut nécessiter un nombre excessif d'appels. Aucun indicateur pris isolément ne permet d'obtenir une vision complète.
L'observabilité de l'IA doit allier qualité, performance, sécurité et coût. Chaque modification pertinente doit être analysée selon ces critères. Si une nouvelle version améliore la précision de 1% mais double le coût, l'équipe doit déterminer si cette augmentation est justifiée par la valeur ajoutée du processus.
Cette intégration facilite également la détection des anomalies. Une augmentation soudaine du nombre de jetons peut être liée à une erreur de récupération de document, à une modification des instructions ou à un comportement d'utilisation inhabituel. L'information financière devient alors un signal opérationnel, et non plus seulement comptable.
Le modèle de retour sur le spectacle Il indique à chaque domaine sa consommation technologique, même si le coût continue d'être supporté de manière centralisée. remboursement Elle impute directement cette dépense au budget de l'équipe ou de l'unité concernée. Ces deux mécanismes visent à accroître la transparence et la responsabilisation.
Dans les premières phases, le retour d'information est souvent plus utile car il permet de former sans créer de frictions immédiates. Un service peut ainsi constater que son assistant utilise un modèle trop coûteux ou maintient des processus actifs en dehors des heures nécessaires. Grâce à ces informations, il peut ajuster ses décisions en concertation avec le service d'ingénierie.
La refacturation peut être utilisée lorsque la pratique est plus mature et que les services maîtrisent suffisamment leurs dépenses. Cependant, une répartition mal conçue peut décourager des expérimentations intéressantes ou entraîner des coûts de transfert que l'équipe ne peut pas gérer.
La FinOps ne consiste pas à soumettre une facture interne et à abandonner le problème. Elle exige une collaboration étroite. La finance assure la rigueur, l'ingénierie explique les causes techniques et le métier détermine si la valeur ajoutée justifie l'investissement.
Il existe un risque inverse aux dépenses incontrôlées : imposer des restrictions rigides alors que le projet a encore besoin d’expérimentation. Durant les premières phases, l’organisation peut ignorer quel modèle, architecture ou cas d’usage donnera les meilleurs résultats. Exiger une rentabilité immédiate risque d’éliminer des opportunités avant même qu’elles ne soient comprises.
FinOps distingue l'expérimentation de l'exploitation. Un essai nécessite un budget limité, un objectif clair et une date d'évaluation. Il n'a pas besoin d'être efficace dès le premier jour, mais il doit générer des enseignements vérifiables.
Le problème survient lorsque les expériences ne s'arrêtent jamais. Les prototypes créés il y a des mois continuent de consommer des ressources, les modèles de test restent actifs et plusieurs domaines reproduisent des études similaires sans partager les résultats.
Une pratique éprouvée autorise l'expérimentation libre dans des limites définies. Chaque initiative doit avoir un responsable, un budget, des hypothèses et un critère de pérennisation. Si elle s'avère utile, elle passe à une phase d'optimisation et de déploiement à plus grande échelle. Dans le cas contraire, elle est abandonnée.
Maîtriser les dépenses ne signifie pas éviter les risques. Cela signifie financer consciemment l'apprentissage.
Les entreprises cherchent souvent à réduire leurs coûts en négociant les prix, en concluant des contrats ou en obtenant des remises sur volume. Ces mesures peuvent créer de la valeur, mais elles ne corrigent pas une structure inefficace.
Un agent effectuant huit appels inutiles restera coûteux, même avec une réduction sur chaque appel. Une application envoyant des documents complets continuera de gaspiller des ressources, même avec une réduction des frais du fournisseur. Un modèle surdimensionné restera un mauvais choix, même avec un contrat avantageux.
Google Cloud souligne que l'optimisation doit commencer par la définition de cas d'utilisation précis, la compréhension du coût total et des choix architecturaux alignés sur l'objectif commercial. AWS propose des recommandations similaires concernant la sélection des modèles, l'inférence et la conception des applications.
Les économies les plus importantes proviennent souvent de l'élimination des calculs superflus. Simplifier les flux de travail, réduire le contexte, utiliser des modèles appropriés, mettre en place un système de cache et limiter les cycles peuvent générer une amélioration plus durable qu'une simple réduction temporaire.
La négociation fait baisser le prix. L'architecture réduit la consommation.
Aucune équipe ne peut résoudre ce problème isolément. Le service financier maîtrise les budgets et les objectifs financiers, mais ne saisit pas toujours les décisions techniques qui sous-tendent la consommation. L'ingénierie comprend les modèles et l'architecture, mais peut manquer de visibilité sur les marges, les priorités et le retour sur investissement. Le service commercial connaît le résultat attendu, mais a besoin d'indicateurs permettant de relier ce résultat aux dépenses technologiques.
FinOps crée un langage commun. Au lieu de simplement discuter de l'augmentation de la facture, les équipes analysent quels produits ont généré cette consommation, la valeur qu'ils ont apportée et les alternatives existantes.
Cette collaboration améliore également la planification. Si l'entreprise prévoit d'accroître sa base d'utilisateurs, l'équipe d'ingénierie peut anticiper l'impact en fonction des jetons, de l'infrastructure et du comportement des agents. L'équipe financière peut évaluer différents scénarios et définir des seuils avant le lancement.
La FinOps Foundation définit précisément cette pratique comme une collaboration interfonctionnelle visant à prendre des décisions opportunes et fondées sur les données concernant la valeur de la technologie. Dans le domaine de l'IA, où les coûts peuvent être dynamiques et difficiles à prévoir, cette collaboration n'est plus une option.
La première étape consiste à dresser un inventaire des applications, agents, modèles et expériences actifs. L'organisation doit savoir qui est responsable de chaque solution, quel est son objectif, quels fournisseurs elle utilise et comment sa consommation est mesurée.
Ensuite, il convient d'établir la répartition des coûts. Chaque coût pertinent doit être associé à un produit, un équipement ou un cas d'utilisation. Il est ensuite conseillé de définir des indicateurs de performance économique : coût par interaction, document, tâche, client servi ou résultat généré.
L'étape suivante consiste à établir des budgets et des alertes. Limiter les dépenses globales ne suffit pas ; il est indispensable de surveiller les anomalies par application et les variations du coût moyen. Enfin, l'entreprise peut mettre en place des cycles d'optimisation périodiques au cours desquels les équipes d'ingénierie, de produit et de finance analysent les résultats.
Il n'est pas nécessaire de construire un système parfait à partir de rien. Un tableau de bord fiable et un petit nombre d'indicateurs peuvent s'avérer plus utiles qu'une plateforme sophistiquée sans responsabilisation. La maturité s'acquiert lorsque l'information commence à influencer les décisions concrètes.
Chez The Cloud Group, nous aidons les organisations à concevoir des architectures d'IA axées sur la performance et la valeur ajoutée. Nous analysons les modèles, les agents, les intégrations, les données, l'infrastructure et les habitudes de consommation afin d'identifier les sources de coûts et de les traduire en résultats concrets.
Notre approche combine architecture cloud, automatisation, observabilité, intégration de systèmes, gouvernance et développement logiciel sur mesure. L'optimisation ne doit pas être une simple formalité à appliquer après avoir reçu une facture salée ; elle doit faire partie intégrante de la conception dès le départ.
Nous contribuons également à définir les limites opérationnelles, les indicateurs de performance par cas d'usage, les stratégies multi-modèles et les mécanismes d'attribution permettant une croissance plus maîtrisée. L'entreprise doit identifier les solutions créatrices de valeur, celles qui nécessitent des ajustements et celles qui ne justifient pas d'investissements supplémentaires.
L'intelligence artificielle ne doit pas être évaluée en fonction du nombre d'agents déployés ou du volume de jetons consommés. Elle doit être mesurée par sa capacité à améliorer les décisions, les processus et les résultats des entreprises.
Il s'agit d'appliquer les principes de collaboration, de visibilité, de responsabilité et d'optimisation financière aux systèmes d'IA. L'objectif est de comprendre le coût de chaque solution, les facteurs qui influencent sa consommation et de déterminer si la valeur ajoutée pour l'entreprise justifie l'investissement technologique.
Outre le modèle, il faut prendre en compte le stockage, la préparation des données, les plongements lexicaux, les bases de données vectorielles, l'infrastructure, les appels d'outils, l'observabilité, la sécurité, l'évaluation, la maintenance et le travail humain. Le coût total de possession est plus large que le simple prix par jeton.
Grâce à une sélection précise du contexte, des résumés, la mise en cache, une récupération efficace des documents, des limites de sortie et l'élimination des instructions répétées, la réduction doit maintenir la qualité nécessaire au processus.
Non. Un modèle trop restrictif peut engendrer des erreurs, accroître le recours à l'intervention humaine ou nécessiter davantage de tentatives. Le choix doit prendre en compte la qualité, la latence, la sécurité, le coût et la valeur ajoutée pour l'entreprise, et non pas uniquement le prix unitaire de chaque appel.
Vous pouvez définir des limites pour chaque étape, jeton, temps d'exécution, appel d'outil et budget. Il est également important de détecter les cycles, les actions redondantes et les variations anormales de consommation.
Le coût par consultation mesure une interaction technique. Le coût par résultat met en relation les dépenses et un avantage commercial, comme un dossier résolu, un prospect qualifié ou un processus mené à bien.
Cette pratique permet à chaque équipe ou service de visualiser les coûts technologiques impliqués, même sans facturation directe. Elle améliore la transparence et favorise une prise de décision plus responsable sans répercuter immédiatement les dépenses.
Non. Son objectif est de maximiser la valeur. Dans certains cas, il peut recommander une réduction des dépenses, et dans d'autres, une augmentation des investissements dans une solution ayant fait ses preuves. La décision repose sur le rapport coût-risque-bénéfice.
L'intelligence artificielle introduit une nouvelle structure de coûts au sein des entreprises. Modèles, jetons, agents, outils, données et infrastructures s'intègrent dans des systèmes dont la consommation varie selon l'utilisateur et la tâche. Faute de visibilité, la facture grimpe plus vite que la capacité à expliquer la valeur ajoutée.
FinOps permet de relier la technologie et les affaires. Elle vous permet de comprendre le coût de chaque cas d'utilisation, les décisions architecturales qui engendrent les dépenses et les résultats qui justifient la poursuite des investissements.
L’objectif n’est pas de brider artificiellement l’innovation ni d’imposer systématiquement l’option la moins coûteuse aux équipes. Il s’agit de bâtir une organisation capable d’expérimenter dans un cadre défini, de progresser en s’appuyant sur des données probantes et d’optimiser sans compromettre la qualité.
Les entreprises qui négligent de mesurer leurs coûts liés à l'IA risquent de constater qu'en automatisant des processus, elles ont également automatisé la croissance incontrôlée de leurs dépenses technologiques. Celles qui intègrent les opérations financières dès la conception pourront comparer les modèles, contrôler les agents, maîtriser la consommation des attributs et orienter leurs investissements vers des solutions qui transformeront véritablement leur activité.
Car le succès de l'intelligence artificielle ne se mesurera pas au nombre de jetons qu'une entreprise peut traiter.
Sa réussite sera mesurée par la valeur qu'elle peut générer avec chacun d'eux.
Il n'est pas forcément nécessaire d'accéder au serveur. Vous pouvez dissimuler une instruction dans un document, un courriel ou une page web que l'agent consulte dans le cadre de son activité habituelle.
Le risque s'accroît lorsque le modèle est autorisé à agir. Une réponse manipulée peut alors cesser d'être un simple sujet de conversation et se transformer en une action ayant des répercussions sur les données, les clients, les communications ou les processus internes.
Par conséquent, la défense ne peut se fonder sur une seule phrase dans l'invite ni sur un seul filtre. Elle nécessite une architecture qui sépare les données, les instructions et les autorisations ; valide les actions ; surveille les comportements ; et limite les conséquences de toute manipulation.
Les entreprises qui connectent directement des agents à leurs systèmes sans ces contrôles risquent de découvrir qu'elles ont automatisé bien plus qu'une simple tâche : elles ont également automatisé une nouvelle surface d'attaque.
La question de sécurité ne se résume plus à savoir si quelqu'un peut pénétrer votre infrastructure.
Nous devons maintenant nous poser la question suivante :
Quelqu'un pourrait-il convaincre votre intelligence artificielle d'utiliser légitimement ses autorisations contre votre propre entreprise ?