責任あるAIのためのパートナーシップ:TruefoundryとEnkrypt AI

Built for Speed: ~10ms Latency, Even Under Load
Blazingly fast way to build, track and deploy your models!
- Handles 350+ RPS on just 1 vCPU — no tuning needed
- Production-ready with full enterprise support
すべての医師と患者に、複雑な医療情報を理解するスマートアシスタントを提供する力を想像してみてください。生成AIはこれを可能にしますが、たった一つの誤った回答が深刻な結果を招く可能性があります。これは、すべての革新的な企業が直面する課題です。この強力なテクノロジーをいかに責任を持って安全に利用するか?
この課題を解決するために、 TrueFoundry と Enkrypt AI は、パートナーシップを発表できることを誇りに思います。私たちは、生成AIのガバナンス、管理、コンプライアンスのための完全なソリューションを提供するために、それぞれの専門知識を結集します。私たちの目標は、すべての組織のリーダーシップチームとセキュリティチームが、自信を持ってイノベーションを進めるために必要な可視性と制御を提供することです。
TrueFoundry AIゲートウェイ:あなたの中心的なコントロールセンター
TrueFoundryゲートウェイを、すべてのAIモデルの中心的なハブと考えてください。これは、運用と監視に必要な強固な基盤を提供し、すべてを一元的に管理できるようにします。

主な機能は以下の通りです。
様々なプロバイダーの異なるモデルを簡単に管理できます。
- チーム全体で誰がアクセスできるかを制御するための詳細なユーザー管理。
- ログ、メトリクス、使用状況データによる強力で明確なインサイト。
- ガードレールのようなカスタムセキュリティツールをゲートウェイに直接組み込む機能。
Enkrypt AI:あなたのAIセキュリティシールド
Enkrypt AIは、インテリジェントなセキュリティレイヤーとして機能し、AIをリスクから保護します。彼らは、問題の防止とコンプライアンスの維持に不可欠な、実用的で高速かつ高精度なガードレールを提供します。

主な機能は以下の通りです。
- バイアス、有害性、誤った情報(ハルシネーション)などの問題を軽減するための高度なガードレール。
- 会社のポリシーに違反する行動の検出と防止。
- 金融やヘルスケアのような規制の厳しい業界において、AIの安全性を確保するための、レッドチーミングと呼ばれる専門的なセキュリティテスト。
連携ガイド:TrueFoundryとEnkrypt AIの連携方法
ドキュメントに従って連携を設定し、デプロイしてください。
TrueFoundry + Enkrypt AI 連携ガイド
との連携は TrueFoundryのAIゲートウェイ と Enkrypt AI 組織が本番環境でLLMを管理、保護、監視するための統一された方法を提供します。特にヘルスケアや金融のような規制の厳しい環境において有効です。
仕組み
- ゲートウェイ経由でルーティング
AIアプリケーションをTrueFoundryゲートウェイに接続し、可視性、アクセス制御、オブザーバビリティを実現します。 - Enkryptガードレールを追加
Enkrypt AIをゲートウェイに接続することで、入出力のリアルタイム監視、不安全な補完のブロック、ポリシーベースの制御の適用が可能になります。 - レッドチーミングを実行(オプション)
Enkryptは、デプロイ前にシステムをストレステストするために、敵対的なプロンプトをシミュレートできます。 - 監視と監査
すべてのアクティビティはゲートウェイ内にログ記録され、明確な追跡可能性とレポート作成が可能になります。
実践的なテスト:あるヘルスケア企業の道のり
実際の事例を見てみましょう。ある大手ヘルスケアテクノロジー企業は、患者や技術者が診断機器を使用するのを支援するため、AI搭載のバーチャルアシスタントを開発しました。 11素晴らしいアイデアではあったものの、彼らはそれが完全に準拠し、正確であることを確実にする必要がありました。
彼らが直面した課題:
その企業はいくつかの深刻な問題に気づきました。
- アシスタントは、デバイスのキャリブレーションのような重要な手順について、一貫性のないアドバイスを与えました。
- 珍しい質問をされた際、それは時々誤った情報(ハルシネーション)を作り出しました。
- これは、HIPAAやFDAガイドラインのような規則の下で、企業を重大な規制リスクに晒しました。
- チームは、これらの危険なやり取りがいつ、どのように発生しているのかを確認する手段がありませんでした。
3段階のソリューション:
- ゲートウェイによる制御の獲得: まず、チャットボットはTrueFoundry Gatewayに接続されました。これにより、チームはすべてのリクエストと応答を即座に可視化できるようになり、ユーザーレベルのアクセス制御を設定できるようになりました。
- 安全のためのガードレール追加: 次に、Enkrypt AIのガードレールがゲートウェイに接続されました。これらは、医療に関する誤情報や不正確な投薬アドバイスを検出するために特別に設定され、違反があった場合には即座にアラートが発せられるようにしました。
- 最後に、Enkrypt AIの自動レッドチーミングがシステムをテストしました。デバイスの誤用方法など、巧妙で有害な質問をチャットボットに送信し、どのように応答するかを確認しました。
変革的な成果:
改善は劇的で測定可能でした。その企業は以下を達成しました:
- ハルシネーションが70%減少。
- FDAポリシーテストへの90%の準拠。
- 安全でない、または不正確な出力が95%削減。
- ツールが社内でどのように使用されているかを100%可視化。
- モデルのテスト、デプロイ、修正サイクルが大幅に高速化。
- 最も重要なのは、Enkrypt AIのレポートを活用して、外部のコンプライアンス監査に合格したことです。
こんな方におすすめ
この統合ソリューションは、以下のようなお客様に最適です。
- ヘルスケア業界やその他の規制対象業界 厳格なコンプライアンス規則を遵守する必要がある
- プロダクトチームおよびプラットフォームチーム ユーザーエクスペリエンスを損なうことなく、安全に新機能をリリースしたい
- セキュリティおよびコンプライアンス担当者 AIリスクを管理するための信頼性の高い、プロアクティブなツールを必要としている
詳細はこちら
- TrueFoundry AI Gatewayとその機能についてさらに詳しく知るには、公式の TrueFoundryドキュメント。
- Enkrypt AIのセキュリティおよびガードレールソリューションスイートについてさらに詳しく知るには、 Enkrypt AIドキュメントをご覧ください。
TrueFoundry AI Gateway delivers ~3–4 ms latency, handles 350+ RPS on 1 vCPU, scales horizontally with ease, and is production-ready, while LiteLLM suffers from high latency, struggles beyond moderate RPS, lacks built-in scaling, and is best for light or prototype workloads.














.webp)
.webp)


.png)

.png)














