Status da Plataforma

Monitoramento em tempo real dos provedores LLM

7
Online
2
Offline
0
Instáveis (Circuit)
30
Modelos
Latência Média
136ms
Latência Máxima
275ms
Saúde Geral
78%

Provedores

Nordeste · projeto-ia · Xeon Gold 5218R

Intel Xeon Gold 5218R · 48vCPU · ambiente projeto-ia · CPU-only, medido em 14/09/2026

🟢 OnlineOK
Latência
158ms
Modelos
9
Falhas
0
Capacidades
🔧 tools | 👁️ vision

Kleos · MANGABA-POCIA01 · Xeon Sapphire Rapids AMX

Intel Xeon Sapphire Rapids / AMX

🟢 OnlineOK
Latência
275ms
Modelos
3
Falhas
0
Capacidades
🔧 tools | 🧠 thinking

Golden · UBUNTU24-TESTE · Xeon Gold 6258R 64vCPU

Intel Xeon Gold 6258R · 64vCPU · ambiente UBUNTU24-TESTE · confirmado via /proc/cpuinfo em 14/09/2026

🟢 OnlineOK
Latência
179ms
Modelos
9
Falhas
0
Capacidades
🔧 tools | ✨ audio

Mangaba AI · api.mangaba.ia.br · CPU na Golden

Intel Xeon Gold 6258R · CPU · mesmo servidor da PoC Golden

🟢 OnlineOK
Latência
161ms
Modelos
3
Falhas
0
Capacidades
🔧 tools | 👁️ vision

TypeSafe · Jev · API hospedada (decisão tipada)

Serviço remoto da TypeSafe AI; sem pesos abertos, sem VM própria

🟢 OnlineOK
Latência
33ms
Modelos
2
Falhas
0
Capacidades
✅ decision | ✨ classification

Hermes · ZeroGPU HF · GPU compartilhada

GPU remota compartilhada no Hugging Face (ZeroGPU)

🔴 Offline
Latência
—
Modelos
0
Falhas
0
Capacidades
🔧 tools | 🛟 reserva

GPU L40S · llm-gpu.mangaba.ia.br · 2× NVIDIA L40S

2× NVIDIA L40S · Tensor Parallel 2 · vLLM

🔴 OfflineOK
Latência
176ms
Modelos
2
Falhas
1
Capacidades
🔧 tools | 👁️ vision

ZeroGPU 14B · Hugging Face · H200 compartilhada

Space privado no Hugging Face com ZeroGPU (fatia de 48 GB de uma H200) · transformers

🟢 OnlineOK
Latência
52ms
Modelos
1
Falhas
0
Capacidades
🔧 tools

ZeroGPU 32B · Hugging Face · H200 compartilhada

Space privado no Hugging Face com ZeroGPU (fatia de 48 GB de uma H200) · transformers · pesos FP8

🟢 OnlineOK
Latência
57ms
Modelos
1
Falhas
0
Capacidades
🔧 tools

⚡ Dicas de Performance

Para Classificações

Envie response_format json_schema com opções fechadas (enum, nota, sim/não) — o Jev decide e devolve a confiança de cada campo

Sem saber qual modelo usar

Peça mangaba-auto: o Jev classifica o pedido e manda para o modelo mais adequado

Latência de Cold Start

Primeira requisição espera ~300-500ms — subsequentes <2ms via cache

Monitoramento

Circuit breaker detecta falhas em <100ms — fallback automático entre provedores

Código pesado ou com prazo

Use o mangaba-titan (~76 tok/s por usuário, ~600 tok/s somados). O mangaba-coder também é atendido por ele desde 08/10

mangaba-zero-14b e mangaba-zero-32b

Usam cota diária de GPU compartilhada: bons para testes, não para uso contínuo

Infraestrutura & Atualizações

🛠️ api.mangaba.ia.br refeito

Gateway e OCR reescritos · mangaba-ocr 40x mais rápido (~3 s por página) · mangaba-fast e mangaba-embed-1536 iguais ao que eram

16/10

🧠 mangaba-raciocinio pensa antes de responder

Raciocínio ligado no titan para esta marca: mais lento e mais certeiro em cálculos e lógica · mangaba-auto ganha o brier-v5 como reserva do Jev

14/10

📈 Selo de velocidade e alerta de lentidão

Coluna Geração com velocidade alta, média ou baixa medida no tráfego real · aviso quando um provedor passa de 60 s de mediana

14/10

🎯 Brier na decisão tipada

brier-v5 (Mangaba AI) é o recomendado entre os abertos: venceu o Jev em avaliações de produtos e empatou em inferência · brier-v2 e brier-v3 passam a ser atendidos pelo v5

12/10

🧪 Novo: mangaba-agente-hibrido

6/6 na bateria agêntica · ~12 tok/s em CPU · sob demanda · 8 modelos sem uso em 30 dias saíram do catálogo

11/10

🚀 Titan mais rápido sob carga

Até ~640 tok/s somados e 1º token em até 4 s com 32 pedidos simultâneos · se a GPU cair, o mangaba-agente assume

10/10

🛟 mangaba-funcoes sem queda por cota

Atendido pelo mangaba-titan; antes falhava quando acabava a cota diária do ZeroGPU

09/10

⚡ Modelos lentos na GPU

coder, multimodal, raciocinio e operador passam a ser atendidos pelo mangaba-titan · decisão aberta fica com kev-4b e kev-0.8b

08/10

⚡ GPU L40S no ar

mangaba-titan · 1º na bateria agêntica (7/7) · ~80-93 tok/s com kernel Marlin · visão nativa

01/10

🔁 Kleos de volta

Fora do ar de 27 a 30/09 · túnel restabelecido · respondendo normalmente

30/09

📊 Status com checagem real

Esta página agora consulta cada provedor de verdade; antes podia mostrar todos como offline

01/10

🧭 mangaba-auto e Jev para todas as contas

O Jev escolhe o modelo de cada pedido · decisões em JSON trazem a confiança de cada campo · fim da detecção por palavra-chave

01/10

🛡️ Circuit Breaker Ativo

Detecta provedores instáveis · Fallback automático · 60x mais rápido que antes

22/09

📊 Health Check em Tempo Real

GET /api/health/providers · Latência por provedor · Estado do circuit breaker

22/09

🔄 Frontend Atualizado

Dados dinâmicos dos provedores · Status em tempo real · Métricas de performance

23/09

💡 Dicas de Performance

Guia prático para otimizar requisições · Cold start vs warm cache

24/09

📚 Capacidades por Provedor

Nordeste · projeto-ia · Xeon Gold 5218Rtoolsvisionfunction_calling
Kleos · MANGABA-POCIA01 · Xeon Sapphire Rapids AMXtoolsthinking
Golden · UBUNTU24-TESTE · Xeon Gold 6258R 64vCPUtoolsaudioembeddingsvoice
Mangaba AI · api.mangaba.ia.br · CPU na Goldentoolsvisionmultimodal
TypeSafe · Jev · API hospedada (decisão tipada)decisionclassificationscoring
ZeroGPU 14B · Hugging Face · H200 compartilhadatools
ZeroGPU 32B · Hugging Face · H200 compartilhadatools

Mangaba Router v2.3.0 • Circuit Breaker + mangaba-auto • Atualizado em tempo real · 20:31:58