Agentes de IA

Zero-Mem: memória para agentes de LLM sem gastar token

Uma técnica que separa o acesso à memória da chamada ao modelo e corta até 70% do consumo de tokens sem perder acurácia.

O que aconteceu

O Zero-Mem permite que agentes de LLM leiam e gravem memória externa sem gerar nem consumir token algum. Agentes tradicionais buscam contexto por meio de prompts — e cada pedaço de contexto recuperado entra na conta, somando latência e custo. O Zero-Mem troca esse caminho por uma interface leve, livre de tokens, que fala direto com um repositório estruturado de memória.

Nos testes descritos, o consumo de tokens caiu até 70% em tarefas típicas de agente, mantendo acurácia comparável à dos métodos baseados em prompt. O tempo de inferência também recuou, com efeito mais pronunciado em agentes que acessam bases de conhecimento grandes ou carregam históricos longos de conversa.

Por que isso importa para quem constrói

  • Custo — 70% menos token significa menos fatura de API em cargas com milhares de requisições diárias. Em operação contínua, é a diferença entre um piloto que fecha a conta e um que não fecha.
  • Desempenho — sem a sobrecarga de tokens, a ida e volta encurta. Isso abre espaço para interação em tempo real em chatbots, atendimento e agentes embarcados.
  • Arquitetura mais simples — desacoplar o acesso à memória do modelo permite trocar o backend de armazenamento — Redis, DynamoDB, cache em memória — sem retreinar nada.
  • Escala previsível — o Zero-Mem cresce de forma linear conforme o repositório aumenta, em vez do crescimento explosivo de tokens que afeta desenhos baseados em prompt.
  • Ergonomia — a superfície de API é mínima, poucas chamadas de função. Encaixar em fluxos de n8n existentes ou em scripts próprios é direto.

A leitura da Tyna

O número que chama atenção é o de custo, mas o efeito mais interessante é outro: auditabilidade.

Quando o contexto viaja dentro do prompt, reconstruir depois *o que exatamente* o modelo viu ao tomar uma decisão é trabalhoso — o histórico está diluído em texto. Com a memória em um repositório estruturado e separado, a consulta vira um registro discreto, com carimbo de tempo e chave. Para quem precisa explicar a um auditor por que o agente negou um crédito ou classificou um chamado de determinado jeito, isso vale mais do que os 70%.

Uma ressalva antes de trocar a arquitetura: o benchmark é dos próprios autores e roda em tarefas típicas. "Acurácia equivalente" em tarefa típica não é a mesma coisa que acurácia equivalente no seu caso de uso. Vale medir com os seus dados antes de mover algo que já funciona.

Perguntas frequentes

P: Funciona com qualquer provedor de LLM?

R: A técnica é agnóstica de modelo. Funciona com qualquer LLM que exponha interface de chamada de função ou de embeddings — OpenAI, Anthropic ou modelos abertos.

P: A qualidade das respostas do agente cai?

R: A acurácia se mantém no mesmo patamar dos métodos baseados em token. O modelo recebe os mesmos embeddings de contexto, apenas sem o custo em tokens.

P: O que preciso mudar nos meus fluxos de n8n?

R: Basta acrescentar um passo que consulta o repositório externo antes de chamar o LLM e outro que grava o resultado de volta. O restante do fluxo continua igual.

Fonte original: arxiv.org

Versão em inglês: Automations Cookbook

Próximo passo

Quer aplicar isso na sua empresa, com governança?

Agendar conversa