Oossa

Microsoft e UC Berkeley lançam o TokenEconomizer

O plugin de código aberto teria reduzido o uso de tokens por agentes de programação entre 18,4% e 30,9% no SWE-Bench, sem alterar o agente.

Por Publicado pelo Oossa: 2 min de leitura

Florian Olivo · Unsplash

A Microsoft Research e a University of California, Berkeley lançaram o TokenEconomizer, um plugin de código aberto criado para reduzir o uso de tokens por agentes de programação. Segundo o MarkTechPost, a ferramenta aprende com sessões anteriores e reduziu os custos com tokens entre 18,4% e 30,9% no SWE-Bench. Os pesquisadores afirmam que o plugin funciona sem alterar o agente.

Tokens são partes de texto processadas por um sistema de IA. Usar menos pode reduzir o consumo de modelos por um agente, embora as porcentagens divulgadas se refiram aos custos com tokens, e não a um valor em dinheiro. Os números também não significam que todos os usuários terão a mesma economia: o resultado foi obtido no SWE-Bench, e os detalhes disponíveis não informam como as reduções variaram entre tarefas ou configurações de agentes.

A ideia central apresentada é que o plugin aprende com sessões anteriores. Em vez de exigir outro agente de programação, o TokenEconomizer é descrito como um complemento que usa o histórico das sessões para tornar o uso de tokens mais eficiente. Isso pode ser relevante para equipes que usam agentes de programação com frequência, mas a descrição não explica quais informações são armazenadas, como a ferramenta decide o que reutilizar nem se os usuários podem controlar essas escolhas.

O que ainda não está claro

A faixa divulgada é promissora como medida da possível economia de tokens, mas faltam detalhes necessários para avaliá-la. O MarkTechPost não informa qual modelo ou agente foi testado, como o benchmark foi configurado, quantas execuções foram feitas nem como o resultado se compara ao de outros métodos para economizar tokens. Também não diz se o resultado foi verificado de forma independente. Sem essas informações, a porcentagem deve ser entendida como um resultado divulgado em um benchmark, não como garantia para outros trabalhos de programação.

O TokenEconomizer é descrito como uma ferramenta de código aberto, mas o resumo do anúncio não informa o endereço do repositório, a licença, os agentes compatíveis nem os requisitos de instalação. Esses detalhes ajudariam os desenvolvedores a saber com que facilidade podem testar o plugin e se ele é compatível com as ferramentas que usam. Por enquanto, a informação confirmada é mais restrita: a Microsoft Research e a UC Berkeley lançaram um plugin que, segundo elas, pode reduzir os custos com tokens de agentes de programação no SWE-Bench sem modificar o agente.

Por que importa

Para desenvolvedores que usam agentes de programação, reduzir o consumo de tokens pode diminuir os custos de uso, caso economias semelhantes também ocorram em suas próprias tarefas. O resultado divulgado se limita ao SWE-Bench, e os detalhes disponíveis não comprovam economias no mundo real, valores em dinheiro nem quais agentes são compatíveis com o plugin.

Este artigo foi útil?
Compartilhar

Leia a seguir

Oossa · Newsletter

A semana em IA, explicada

Toda segunda-feira: as notícias que valem a pena, em linguagem simples. Grátis, sem spam.