Inteligência Itaú

Demo de cache semântico com Redis LangCache

inteligência itaú concierge com cache semântico
conectando…
·
powered by LangCache
0
Cache hits
0
Chamadas LLM
0%
Hit rate
0
Bypass seguro
·
Speedup do cache
$0.00
Economia da sessão

Replay do tráfego do concierge

amostra histórica do tráfego (15 a 22 de julho), ao vivo contra o LangCache
Modelo de custo (por chamada LLM evitada)
0
Perguntas
0%
Hit rate
0
Chamadas LLM evitadas
0
Tokens poupados
$0.00
Economia (USD)
·
Latência média cache

Hit rate ao longo do replay

a curva de aquecimento acontecendo ao vivo

Perguntas processadas