Voltar aos guias
Comparar·12 de setembro de 2026·Atualizado em 30 de setembro de 2026·9 min de leitura

Alternativas ao LiteLLM (2026) — gateways hospedados, planos de controle com sua própria chave e quando continuar usando-o

O LiteLLM é um proxy compatível com OpenAI que você executa usando suas próprias chaves de provedor. As equipes o deixam por dois motivos independentes — não querem mais operar um proxy ou o ataque à cadeia de fornecimento do PyPI em março de 2026 fez com que reavaliassem o custo de incluir um pacote no build. Este comparativo associa cada motivação à ferramenta que a atende, incluindo o caso de continuar usando o LiteLLM.

Última revisão em .

O LiteLLM é um proxy de código aberto compatível com OpenAI que você executa por conta própria: ele fica na frente das suas próprias contas de fornecedores e oferece ao seu código um endpoint e um formato de chave únicos entre eles (sua documentação). As equipes procuram alternativas por dois motivos sem relação entre si. Operacional: um proxy hospedado por você é mais um serviço para atualizar, escalar e monitorar. Cadeia de suprimentos: em 24 de março de 2026, um invasor publicou duas versões comprometidas do LiteLLM no PyPI, e o incidente colocou diante de muitas equipes a superfície de ataque de “um pacote na sua compilação”, algo que elas não haviam contabilizado. Esta comparação relaciona cada motivação à ferramenta que realmente a atende — incluindo o caso de continuar usando o LiteLLM, que é mais forte do que as sete listas de fornecedores desta pesquisa sugerem.

Viés declarado desde o início: o Kunavo é nosso produto e aparece primeiro. Todos os demais produtos abaixo recebem uma recomendação genuína; os detalhes que verificamos estão nas páginas de comparação, e os dois produtos que não avaliamos são descritos apenas no nível declarado pelos próprios sites.

A lista curta

AlternativaTipoEscolha-o por
KunavoGateway de inferência hospedado (acesso revendado)Sem proxy e sem contas de fornecedores; abaixo do preço de tabela na maioria dos modelos
OpenRouterGateway de inferência hospedado (acesso revendado)O catálogo mais amplo de modelos em uma única carteira
PortkeyPlano de controle hospedado (BYO keys)Mantenha suas chaves de fornecedores e deixe de executar o proxy
HeliconeCamada de observabilidade (BYO keys)Logging e acompanhamento de custos eram o único motivo para usá-lo
TrueFoundryGateway de IA empresarialO setor de compras exige um SLA e um fornecedor para contatar
MLflow AI GatewayHospedado por você, código abertoMesma estrutura do LiteLLM, projeto diferente
Cloudflare AI GatewayProxy de borda (BYO keys)Cache, limites de taxa e análises sobre suas próprias chaves

A distinção que resolve a maior parte da questão

O LiteLLM faz duas coisas ao mesmo tempo, e a maioria das substituições faz apenas uma. Ele é um proxy (um endpoint para vários fornecedores) e uma ferramenta BYO-key (as contas dos fornecedores continuam sendo suas). Um gateway de inferência hospedado — Kunavo, OpenRouter — substitui ambos: não há proxy para executar nem conta de fornecedor para manter, porque o gateway mantém as credenciais upstream e cobra você pelo uso. Um plano de controle hospedado — Portkey, TrueFoundry — substitui apenas o primeiro: você deixa de operar o proxy, mas mantém as contas. Saber qual metade você está substituindo resolve a maior parte desta lista. O padrão em si é explicado no guia de gateways de LLM.

O que realmente levou as pessoas a pesquisar

O principal resultado desta pesquisa não é uma lista — é uma discussão no Reddit sobre o ataque à cadeia de suprimentos. Eis o que aconteceu, segundo a própria atualização de segurança do LiteLLM: em 24 de março de 2026, um invasor publicou litellm==1.82.7 e litellm==1.82.8 no PyPI com código malicioso injetado nos wheels distribuídos. Eles ficaram disponíveis a partir das 10:39 UTC por aproximadamente 40 minutos, antes de o PyPI colocá-los em quarentena. O comprometimento foi rastreado até a dependência Trivy no fluxo de trabalho de análise de segurança de CI/CD do LiteLLM; o invasor contornou o fluxo oficial de lançamento e fez o upload diretamente para o PyPI. Segundo a SecurityWeek, mais de 2.500 organizações foram afetadas.

A correção do LiteLLM está registrada e é substancial: os pacotes comprometidos foram removidos, as credenciais dos mantenedores foram rotacionadas, a Mandiant foi contratada para a perícia e a v1.83.0 foi lançada por meio de um pipeline de CI/CD reconstruído, com ambientes de compilação isolados, controles de lançamento mais fortes e imagens Docker assinadas com cosign. Se você está na 1.83.0 ou posterior e não executava uma versão comprometida durante aquela janela de 40 minutos, o incidente está encerrado para você.

O motivo pelo qual isso ainda leva as pessoas a esta pesquisa é estrutural, não específico do LiteLLM. Um proxy hospedado por você é um pacote na sua compilação, o que coloca seu CI/CD e seu cluster dentro do raio de impacto dele. Essa é a frase que vale a pena considerar — ela também é verdadeira para todas as alternativas hospedadas por você nesta página, inclusive o MLflow AI Gateway, e é a única coisa que um endpoint hospedado remove: você chama uma URL HTTPS, portanto não há pacote para comprometer nem nada do gateway sendo executado dentro da sua rede.

A outra metade, honestamente: um gateway hospedado não é mais seguro; sua exposição é diferente. Sua chave de API e o texto dos seus prompts passam pela infraestrutura de outra pessoa, e você assume o risco de violação dela em lugar do risco de aplicar seus próprios patches. Se o texto dos prompts não puder sair da sua infraestrutura, hospedar a solução por conta própria é a resposta correta, e o restante desta página trata de uma troca que você não deve fazer.

1. Kunavo — sem proxy, sem contas de fornecedores

O Kunavo é um gateway de inferência hospedado: uma base URL compatível com OpenAI, uma chave sk-kn-, um saldo pré-pago conforme o uso, e nós mantemos as credenciais dos fornecedores upstream, não você. Em comparação com o LiteLLM, isso representa uma divisão de responsabilidades diferente — você não executa um proxy nem mantém contas separadas na Anthropic, no Google e na OpenAI.

Preço: a maior parte do catálogo aparece abaixo das tarifas oficiais dos fornecedores — Claude Sonnet 4.6 a $2.10 / $10.50 por 1M de tokens, em comparação com as tarifas da Anthropic de $3.00 / $15.00. O LiteLLM não aplica acréscimo porque não revende nada; o que você paga é o valor do seu próprio acordo com o fornecedor, portanto a comparação é entre nossa tarifa e sua tarifa direta, não com zero. Cobertura: modelos de chat, imagem, vídeo e música na mesma chave e no mesmo saldo. O que ele não faz: rotear suas próprias chaves de fornecedores — essa é a metade BYO-key que o LiteLLM mantém e nós não substituímos. Detalhes: Kunavo vs LiteLLM.

2. OpenRouter — o catálogo mais amplo

O outro gateway de inferência hospedado, e a escolha certa quando a amplitude do catálogo importa mais do que o preço unitário: centenas de modelos de um grande conjunto de fornecedores em uma única carteira, além de planos gratuitos e roteamento com sua própria chave, algo que o Kunavo não oferece. Se você está deixando o LiteLLM porque quer parar de manter contas, OpenRouter e Kunavo são as duas opções realistas. Kunavo vs OpenRouter coloca os dois lado a lado, e a comparação do OpenRouter cobre o restante desse campo.

3. Portkey — mantenha suas chaves e elimine a operação

Um plano de controle hospedado sobre contas de fornecedores que você já possui: roteamento, fallbacks, guardrails e observabilidade, sem precisar executar seu próprio proxy. Esta é a substituição mais próxima se você escolheu o LiteLLM pelos recursos de roteamento e orçamento e a única coisa que realmente quer abandonar é a operação. Detalhes: Kunavo vs Portkey.

4. Helicone — se observabilidade era o único motivo

Muitas implantações do LiteLLM existem porque alguém precisava de logs de solicitações e atribuição de custos por equipe, e o proxy era a forma de obtê-los. Se esse for o seu caso, uma camada de observabilidade sobre suas chamadas existentes aos fornecedores é muito menor para operar do que um gateway. Detalhes: Kunavo vs Helicone.

5. TrueFoundry — quando o setor de compras precisa de um fornecedor

Ocupa a posição 2 nesta pesquisa com sua própria comparação com o LiteLLM. É um gateway de IA empresarial vendido com base em sobrecarga de latência, flexibilidade de implantação, SLAs, governança e controles prontos para auditoria (sua página de produto). Não o avaliamos, portanto esta entrada é uma referência, não uma recomendação: se o seu impedimento é que um proxy de código aberto não tem contrato de suporte, esta é a categoria que resolve isso, e vale ler a comparação sabendo que foi escrita por eles.

6. MLflow AI Gateway — a substituição de código aberto equivalente

Posição 3, e o recurso desta página mais próximo do próprio LiteLLM: um gateway de código aberto, hospedado por você, que coloca suas próprias chaves de fornecedores atrás de um endpoint e é mantido como parte do projeto MLflow. Vale dizer claramente: trocar um proxy hospedado por você por outro mantém o modelo de implantação e, portanto, mantém a superfície de ataque descrita acima. É uma escolha legítima — é o que você quer se o problema era o projeto, não o modelo.

7. Cloudflare AI Gateway — cache e limites na borda

Um proxy fino na frente das contas de fornecedores que você já possui: cache de respostas, limitação de taxa, novas tentativas e análises, sem revenda de inferência. Ele se combina com qualquer fonte de inferência, em vez de substituí-la, inclusive Kunavo ou OpenRouter. Detalhes: Kunavo vs Cloudflare AI Gateway.

Quando o LiteLLM ainda é a escolha certa

  • O texto dos prompts não pode sair da sua infraestrutura. Dados regulamentados, ambientes isolados ou uma política que um gateway hospedado simplesmente não consegue atender. Hospedar a solução por conta própria é a resposta, e a única questão é qual proxy hospedado por você escolher.
  • Você tem contratos negociados com fornecedores. Compromissos de gastos ou tarifas empresariais na Anthropic, OpenAI ou Google valem mais do que qualquer preço listado por um revendedor, e as ferramentas BYO-key permitem continuar usando-os.
  • Você usa os orçamentos por chave e o roteamento por equipe. Esses recursos são o motivo pelo qual muitas implantações do LiteLLM existem; verifique se a substituição os cobre antes de presumir que uma troca de base URL seja toda a migração.
  • Você quer um código-fonte que possa ler e corrigir. Um proxy de código aberto sob seu controle é uma propriedade real, e o incidente de março de 2026 não a elimina — foi um comprometimento do pipeline de lançamento, já corrigido, não uma falha no próprio proxy.

Mudar exige duas linhas

Todas as alternativas desta página que revendem inferência usam o protocolo de comunicação da OpenAI, portanto sair de um proxy LiteLLM é uma troca de base_url e de chave — os formatos de solicitação e resposta permanecem inalterados:

switch.py
# Before: your own LiteLLM proxy, your own provider keys,
# your own container to patch.
client = OpenAI(
    api_key=os.environ["LITELLM_MASTER_KEY"],
    base_url="http://litellm.internal:4000",
)

# After: a hosted endpoint. No package in your build, no proxy to run.
client = OpenAI(
    api_key=os.environ["KUNAVO_API_KEY"],
    base_url="https://api.kunavo.com/v1",
)

resp = client.chat.completions.create(
    model="claude-sonnet-5",
    messages=[{"role": "user", "content": "Hello"}],
)
print(resp.choices[0].message.content)

A parte que não cabe em duas linhas é tudo o que o LiteLLM fazia além do roteamento: orçamentos por chave, distribuição por equipe e callbacks personalizados. Faça esse inventário primeiro. Os detalhes no nível do protocolo estão no guia da API compatível com OpenAI, e o que um gateway deve fazer por você apresenta o conjunto de recursos que você deve verificar na substituição.

Perguntas frequentes

Qual é a melhor alternativa ao LiteLLM?

Depende do que você quer substituir. Se quiser deixar de executar um proxy e de manter contas de fornecedores, um gateway de inferência hospedado, como Kunavo ou OpenRouter, substitui ambos de uma vez. Se quiser manter suas próprias chaves de fornecedores, mas não operar o proxy, Portkey ou TrueFoundry são planos de controle hospedados com BYO-key. Se logging e acompanhamento de custos eram os únicos motivos para usar o LiteLLM, o Helicone cobre apenas isso. Se você quer uma opção de código aberto para hospedar por conta própria, o MLflow AI Gateway é o equivalente mais próximo.

Por que as pessoas estão procurando alternativas ao LiteLLM em 2026?

Por dois motivos distintos. O operacional é comum: um proxy hospedado por você é um serviço que precisa ser atualizado, escalado e gerar alertas para alguém. O segundo é específico — em 24 de março de 2026, um invasor publicou duas versões do LiteLLM com backdoors no PyPI e, segundo a SecurityWeek, o incidente atingiu mais de 2.500 organizações. Desde então, o LiteLLM rotacionou credenciais e reconstruiu seu pipeline de lançamento; portanto, para a maioria das equipes, a questão não é se o LiteLLM é seguro agora, mas se querem uma dependência desse tipo na própria compilação.

Quais versões do LiteLLM foram comprometidas no ataque à cadeia de suprimentos de março de 2026?

litellm==1.82.7 e litellm==1.82.8. Segundo a própria atualização de segurança do LiteLLM, elas ficaram disponíveis no PyPI em 24 de março de 2026, a partir das 10:39 UTC, por cerca de 40 minutos, antes de o PyPI colocá-las em quarentena. O LiteLLM rastreou o comprometimento até a dependência Trivy no fluxo de trabalho de análise de CI/CD, contratou a Mandiant para a perícia e lançou a v1.83.0 por meio de um pipeline reconstruído, com ambientes de compilação isolados e imagens Docker assinadas.

Um gateway de IA hospedado é mais seguro do que hospedar o LiteLLM por conta própria?

Não é mais seguro — sua exposição é diferente. Um gateway hospedado remove o pacote da sua compilação e o proxy do seu cluster, portanto uma versão comprometida não consegue alcançar seu CI/CD nem seus nós Kubernetes por esse caminho. Em troca, sua chave de API e o texto dos seus prompts passam por terceiros, e você assume o risco de violação desse fornecedor em vez do seu próprio. Equipes que não podem enviar texto de prompts para fora da própria infraestrutura devem hospedar a solução por conta própria; a escolha é um modelo de confiança, não uma pontuação de segurança.

Existe uma alternativa de código aberto ao LiteLLM?

O MLflow AI Gateway é o equivalente mais próximo: um gateway de código aberto, hospedado por você, que faz proxy das suas próprias chaves de fornecedores por trás de um único endpoint e é mantido como parte do projeto MLflow. Ele ocupa a posição 3 nesta pesquisa e é a alternativa mais semelhante ao próprio LiteLLM em sua estrutura.

Como faço para migrar do LiteLLM?

Se você estiver migrando para outro endpoint compatível com OpenAI, a migração consiste em trocar o base_url e a chave de API — os formatos de solicitação e resposta não mudam, e os nomes dos modelos permanecem no mesmo padrão. O trabalho que não cabe em duas linhas é o que o LiteLLM fazia além do roteamento: aplicação de orçamento, distribuição de chaves por equipe e callbacks personalizados. Verifique quais desses recursos sua substituição oferece antes de fazer a mudança.

Quando devo continuar usando o LiteLLM?

Continue usando-o quando o texto dos prompts não puder sair da sua infraestrutura, quando você já tiver contratos negociados com fornecedores que deseja continuar usando, quando precisar dos recursos de orçamento por chave e roteamento por equipe ou quando quiser um proxy de código aberto que possa ler e corrigir por conta própria. Esses são pontos fortes reais, e o incidente de março de 2026 não elimina nenhum deles — foi um comprometimento do pipeline de lançamento, já corrigido, não uma falha no funcionamento do proxy.