Un partenariat pour une IA responsable : Truefoundry et Enkrypt AI

Conçu pour la vitesse : latence d'environ 10 ms, même en cas de charge
Une méthode incroyablement rapide pour créer, suivre et déployer vos modèles !
- Gère plus de 350 RPS sur un seul processeur virtuel, aucun réglage n'est nécessaire
- Prêt pour la production avec un support complet pour les entreprises
Imaginez le pouvoir de doter chaque médecin et chaque patient d'un assistant intelligent capable de comprendre des informations médicales complexes. L'IA générative rend cela possible, mais une seule mauvaise réponse peut avoir de graves conséquences. C'est le défi auquel toutes les entreprises innovantes sont confrontées : comment utiliser cette puissante technologie de manière responsable et sûre ?
Pour résoudre ce problème, True Foundry et Chiffrer l'IA sont fiers d'annoncer un partenariat. Nous réunissons notre expertise pour proposer une solution complète pour la gouvernance, le contrôle et la conformité de l'IA générative. Notre objectif est de donner à la direction et aux équipes de sécurité de chaque organisation la visibilité et le contrôle dont elles ont besoin pour innover en toute confiance.
La passerelle TrueFoundry AI : votre centre de contrôle central
Considérez la passerelle TrueFoundry comme le hub central pour tous vos modèles d'IA. Il fournit la base solide dont vous avez besoin pour les opérations et la surveillance, vous permettant de tout gérer à partir d'un seul endroit.

Les principales caractéristiques sont les suivantes :
Gestion facile des différents modèles de différents fournisseurs.
- Gestion détaillée des utilisateurs pour contrôler qui a accès au sein de vos équipes.
- Des informations puissantes et claires grâce à des journaux, des métriques et des données d'utilisation.
- La possibilité de connecter des outils de sécurité personnalisés, tels que des garde-corps, directement à la passerelle.
Enkrypt AI : votre bouclier de sécurité pour l'IA
Enkrypt AI agit en tant que couche de sécurité intelligente, protégeant votre IA des risques. Ils fournissent des garde-corps pratiques, rapides et très précis qui sont essentiels pour prévenir les problèmes et maintenir la conformité.

Les principales caractéristiques sont les suivantes :
- Des garde-fous avancés pour réduire les problèmes tels que les biais, la toxicité et les informations incorrectes (hallucinations).
- Détection et prévention des actions contraires à la politique de l'entreprise.
- Des tests de sécurité spécialisés, connus sous le nom de red teaming, pour garantir la sécurité de votre IA pour les secteurs réglementés tels que la finance et la santé.
Guide d'intégration : comment TrueFoundry et Enkrypt AI travaillent ensemble
Autorisez notre documentation à configurer et à déployer l'intégration :
Guide d'intégration de TrueFoundry + Enkrypt AI
L'intégration entre Passerelle IA de TrueFoundry et Chiffrer l'IA offre aux entreprises un moyen unifié de gérer, de sécuriser et de surveiller les LLM en production, en particulier dans les environnements réglementés tels que la santé et la finance.
Comment ça marche
- Itinéraire à travers la passerelle
Connectez vos applications d'IA à la passerelle TrueFoundry pour plus de visibilité, de contrôle d'accès et d'observabilité. - Ajouter des garde-corps Enkrypt
Connectez Enkrypt AI à la passerelle pour surveiller les entrées et les sorties en temps réel, bloquer les complétions non sécurisées et appliquer des contrôles basés sur des politiques. - Exécutez Red Teaming (facultatif)
Enkrypt peut simuler des instructions contradictoires pour tester votre système avant le déploiement. - Surveiller et auditer
Toutes les activités sont enregistrées dans la passerelle, ce qui permet une traçabilité et des rapports clairs.
Le mettre à l'épreuve : le parcours d'une entreprise de soins de santé
Regardons un exemple concret. Une société de technologie de santé de premier plan a créé un assistant virtuel alimenté par l'IA pour aider les patients et les techniciens à utiliser leur équipement de diagnostic. 11Bien qu'il s'agisse d'une excellente idée, ils devaient s'assurer qu'elle était parfaitement conforme et précise.
Les obstacles auxquels ils ont dû faire face :
L'entreprise a remarqué de sérieux problèmes.
- L'assistant a donné des conseils incohérents sur des procédures importantes telles que l'étalonnage des appareils.
- Il inventait parfois des informations incorrectes (hallucinations) lorsqu'on lui posait des questions inhabituelles.
- Cela a exposé l'entreprise à des risques réglementaires majeurs en vertu de règles telles que les directives HIPAA et FDA.
- L'équipe n'avait aucun moyen de savoir quand et comment ces interactions risquées se produisaient.
Une solution en trois étapes :
- Prendre le contrôle grâce à la passerelle : Tout d'abord, le chatbot a été connecté à la passerelle TrueFoundry. Cela a immédiatement donné à l'équipe une visibilité sur toutes les demandes et réponses et lui a permis de configurer des contrôles d'accès au niveau de l'utilisateur.
- Ajout de garde-corps pour des raisons de sécurité : Ensuite, les garde-corps d'Enkrypt AI ont été branchés sur la passerelle. Ils ont été mis en place spécifiquement pour détecter les informations médicales erronées et les conseils posologiques incorrects, avec des alertes instantanées en cas de violation.
- Enfin, le red teaming automatisé d'Enkrypt AI a mis le système à l'épreuve. Il a envoyé des questions délicates et nuisibles au chatbot, par exemple comment utiliser un appareil à mauvais escient, pour voir comment il réagirait.
Les résultats transformateurs :
Les améliorations étaient spectaculaires et mesurables. L'entreprise a atteint les objectifs suivants :
- Diminution de 70 % des hallucinations.
- 90 % de conformité aux tests de politique de la FDA.
- Une réduction de 95 % des sorties dangereuses ou incorrectes.
- 100 % de visibilité sur la manière dont l'outil était utilisé dans l'entreprise.
- Un cycle beaucoup plus rapide pour tester, déployer et corriger le modèle.
- Plus important encore, ils ont réussi leur audit de conformité externe à l'aide des rapports d'Enkrypt AI.
C'est pour qui ?
Cette solution combinée est parfaite pour :
- Secteur de la santé et autres secteurs réglementés qui doivent respecter des règles de conformité strictes.
- Équipes chargées des produits et de la plateforme qui souhaitent lancer de nouvelles fonctionnalités en toute sécurité sans ruiner l'expérience utilisateur.
- Responsables de la sécurité et de la conformité qui ont besoin d'outils fiables et proactifs pour gérer les risques liés à l'IA.
En savoir plus
- Pour en savoir plus sur la passerelle TrueFoundry AI Gateway et ses fonctionnalités, consultez le Documentation TrueFoundry.
- Pour en savoir plus sur la suite de solutions de sécurité et de garde-corps d'Enkrypt AI, visitez le Chiffrez la documentation sur l'IA.
TrueFoundry AI Gateway offre une latence d'environ 3 à 4 ms, gère plus de 350 RPS sur 1 processeur virtuel, évolue horizontalement facilement et est prête pour la production, tandis que LiteLM souffre d'une latence élevée, peine à dépasser un RPS modéré, ne dispose pas d'une mise à l'échelle intégrée et convient parfaitement aux charges de travail légères ou aux prototypes.
Le moyen le plus rapide de créer, de gérer et de faire évoluer votre IA











.webp)



.png)


.webp)




.webp)







