Een partnerschap voor verantwoorde AI: TrueFoundry en Enkrypt AI

Gebouwd voor snelheid: ~10ms latentie, zelfs onder belasting
De razendsnelle manier om je modellen te bouwen, volgen en implementeren!
- Verwerkt 350+ RPS op slechts 1 vCPU — geen tuning nodig
- Productieklaar met volledige enterprise-ondersteuning
Stel je de kracht voor van een slimme assistent voor elke arts en patiënt die complexe medische informatie begrijpt. Generatieve AI maakt dit mogelijk, maar één verkeerd antwoord kan ernstige gevolgen hebben. Dit is de uitdaging waar elk innovatief bedrijf voor staat: hoe zetten we deze krachtige technologie verantwoord en veilig in?
Om dit op te lossen, kondigen TrueFoundry en Enkrypt AI met trots een partnerschap aan. We brengen onze expertise samen om een complete oplossing te bieden voor governance, controle en compliance van Generatieve AI. Ons doel is om het management en de beveiligingsteams van elke organisatie het inzicht en de controle te geven die ze nodig hebben om met vertrouwen te innoveren.
De TrueFoundry AI Gateway: Jouw centrale controlecentrum
Zie de TrueFoundry Gateway als de centrale hub voor al je AI-modellen. Het biedt het solide fundament dat je nodig hebt voor operations en monitoring, zodat je alles vanuit één plek kunt beheren.

Belangrijkste functionaliteiten zijn onder meer:
Eenvoudig beheer van verschillende modellen van diverse providers.
- Gedetailleerd gebruikersbeheer om te bepalen wie toegang heeft binnen je teams.
- Krachtige en duidelijke inzichten met logs, metrics en gebruiksgegevens.
- De mogelijkheid om aangepaste beveiligingstools, zoals guardrails, direct op de gateway aan te sluiten.
Enkrypt AI: Jouw AI-beveiligingsschild
Enkrypt AI fungeert als de intelligente beveiligingslaag die je AI beschermt tegen risico's. Ze bieden praktische, snelle en uiterst nauwkeurige guardrails die essentieel zijn om problemen te voorkomen en compliance te behouden.

Belangrijkste functionaliteiten zijn onder meer:
- Geavanceerde guardrails om problemen zoals bias, toxiciteit en onjuiste informatie (hallucinaties) te verminderen.
- Detectie en preventie van acties die het bedrijfsbeleid schenden.
- Gespecialiseerde beveiligingstests, bekend als red teaming, om te zorgen dat je AI veilig is voor gereguleerde sectoren zoals de financiële sector en de gezondheidszorg.
Integratiegids: Hoe TrueFoundry en Enkrypt AI samenwerken
Raadpleeg onze documentatie om de integratie te configureren en te deployen:
TrueFoundry + Enkrypt AI Integratiegids
De integratie tussen TrueFoundry’s AI Gateway en Enkrypt AI biedt organisaties een uniforme manier om LLMs in productie te beheren, te beveiligen en te monitoren—vooral in gereguleerde omgevingen zoals de gezondheidszorg en de financiële sector.
Hoe het werkt
- Routeer via de Gateway
Verbind je AI-applicaties met de TrueFoundry Gateway voor overzicht, toegangsbeheer en observability. - Voeg Enkrypt Guardrails toe
Sluit Enkrypt AI aan op de Gateway om inputs en outputs in real-time te monitoren, onveilige completions te blokkeren en op beleid gebaseerde controles af te dwingen. - Voer Red Teaming uit ( Optioneel)
Enkrypt kan kwaadwillige prompts simuleren om je systeem vóór deployment aan een stresstest te onderwerpen. - Monitor en Audit
Alle activiteit wordt gelogd binnen de Gateway, wat zorgt voor duidelijke traceerbaarheid en rapportage.
De proef op de som: De ervaring van een gezondheidszorgbedrijf
Laten we kijken naar een praktijkvoorbeeld. Een toonaangevend bedrijf in gezondheidszorgtechnologie creëerde een AI-gestuurde virtuele assistent om patiënten en technici te helpen bij het gebruik van hun diagnostische apparatuur. 11Hoewel het een geweldig idee was, moesten ze ervoor zorgen dat het volledig compliant en nauwkeurig was.
De obstakels waar ze voor stonden:
Het bedrijf opgemerkt enkele ernstige problemen.
- De assistent gaf inconsistente adviezen over belangrijke procedures zoals apparaatcalibratie.
- Het verzon soms onjuiste informatie (hallucinaties) wanneer er ongebruikelijke vragen werden gesteld.
- Dit blootstelde het bedrijf aan grote regelgevingsrisico's onder richtlijnen zoals HIPAA en FDA-voorschriften.
- Het team had geen manier om te zien wanneer of hoe deze risicovolle interacties plaatsvonden.
Een oplossing in drie stappen:
- Controle krijgen met de Gateway: Eerst werd de chatbot verbonden met de TrueFoundry Gateway. Dit gaf het team direct inzicht in alle requests en responses en stelde hen in staat om toegangscriteria op gebruikersniveau in te stellen.
- Guardrails toevoegen voor veiligheid: Vervolgens werden de guardrails van Enkrypt AI op de gateway aangesloten. Deze werden specifiek ingesteld om medische desinformatie en onjuist doseringsadvies op te vangen, met directe meldingen bij eventuele schendingen.
- Tot slot stelde de geautomatiseerde red teaming van Enkrypt AI het systeem op de proef. Het stuurde lastige en schadelijke vragen naar de chatbot, zoals hoe een apparaat verkeerd gebruikt kon worden, om te zien hoe deze zou reageren.
De transformationele resultaten:
De verbeteringen waren drastisch en meetbaar. Het bedrijf behaalde:
- Een daling van 70% in hallucinaties.
- 90% compliance met FDA-beleidstests.
- Een reductie van 95% in onveilige of onjuiste outputs.
- 100% inzicht in hoe de tool binnen het hele bedrijf werd gebruikt.
- Een veel snellere cyclus voor het testen, deployen en verbeteren van het model.
- Het allerbelangrijkste: ze slaagden voor hun externe compliance-audit met behulp van de rapporten van Enkrypt AI.
Voor wie is dit geschikt?
Deze gecombineerde oplossing is perfect voor:
- De gezondheidszorg en andere gereguleerde sectoren die moeten voldoen aan strenge compliance-regels.
- Product- en Platformteams die nieuwe functionaliteiten veilig willen lanceren zonder de gebruikerservaring te verstoren.
- Security- en Compliance-officers die betrouwbare, proactieve tools nodig hebben om AI-risico's te beheren.
Meer informatie
- Om dieper in te gaan op de TrueFoundry AI Gateway en de mogelijkheden ervan, bekijk de officiële TrueFoundry Documentatie.
- Om meer te ontdekken over het pakket aan beveiligings- en guardrail-oplossingen van Enkrypt AI, bezoek de Enkrypt AI Documentatie.
TrueFoundry AI Gateway levert een latentie van ~3–4 ms, verwerkt 350+ RPS op 1 vCPU, schaalt moeiteloos horizontaal en is klaar voor productie, terwijl LiteLLM last heeft van hoge latentie, moeite heeft boven een gemiddeld aantal RPS, geen ingebouwde schaling heeft en het meest geschikt is voor lichte workloads of prototypes.















.png)

.webp)



.webp)








.webp)





