Prevenção contra perda de dados para tráfego de LLM: onde ela deve ser implementada
.png)
Built for Speed: ~10ms Latency, Even Under Load
Blazingly fast way to build, track and deploy your models!
- Handles 350+ RPS on just 1 vCPU — no tuning needed
- Production-ready with full enterprise support

TrueFoundry AI Gateway delivers ~3–4 ms latency, handles 350+ RPS on 1 vCPU, scales horizontally with ease, and is production-ready, while LiteLLM suffers from high latency, struggles beyond moderate RPS, lacks built-in scaling, and is best for light or prototype workloads.


Recent Blogs
Frequently asked questions
O que é prevenção contra perda de dados para tráfego de LLM?
Inspecionar e controlar dados sensíveis antes que eles saiam do seu perímetro em um prompt, uma chamada de ferramenta ou uma resposta do modelo. Ela difere do DLP clássico porque não há arquivo nem destino não autorizado — a carga é JSON dentro de uma sessão TLS para uma API pela qual você paga. Os controles precisam entender o esquema da requisição e ficar em um ponto de controle de saída autenticado.
Por que o DLP de rede clássico não enxerga o tráfego de LLM?
Três motivos se somam. O destino está na lista de permissões por design, então as regras de destino nunca disparam. O conteúdo fica em um array de conversa aninhado, e não em um arquivo ou campo de formulário, o que os mecanismos orientados a documentos analisam mal. E, sem inspeção de TLS, não há nada para analisar — sendo que nem mesmo um proxy com inspeção consegue dizer qual chamador enviou a requisição.
Um AI gateway pode bloquear requisições que contenham PII?
Depende do detector. A detecção de PII / PHI integrada do TrueFoundry é apenas de mutação — ela sempre oculta os dados, nunca rejeita. Para um bloqueio rígido, você precisa de uma integração com capacidade de validação, como AWS Bedrock Guardrails, Azure PII ou CrowdStrike. “Detecção de PII” em uma lista de recursos nunca diz se o resultado é uma ocultação ou um 400.
Posso implantar o TrueFoundry na minha própria VPC ou on-prem?
Sim. O TrueFoundry é executado na sua VPC, on-prem, em ambiente air-gapped ou híbrido, de modo que os prompts e as respostas nunca saem do seu domínio, mesmo quando você roteia entre muitos provedores.
O TrueFoundry oferece suporte a MCP e a agentes de IA em geral?
Sim. Ele inclui um MCP Gateway, um Agent Gateway e um MCP & Agents Registry com controle de acesso em nível de ferramenta. Agentes criados com LangGraph, CrewAI, AutoGen ou um framework próprio podem ser governados de forma centralizada.
Ele se integra com a minha stack de observabilidade existente?
Sim. O gateway é compatível com OpenTelemetry e se integra com Grafana, Datadog, Prometheus ou a sua stack preferida. Ele rastreia cada requisição, do prompt à execução da ferramenta e do modelo, para que você obtenha logs unificados sem precisar remover o que você já usa.











.png)
.png)
.png)

.webp)
.webp)
.png)

.png)
.png)
.png)
.png)
.png)
.webp)
.webp)

.png)





