Quando o agente de IA erra a escolha, mas compra mesmo assim
Em 5 de novembro de 2026, a Visa publicou o Visa Agentic Commerce Benchmark, que o comunicado da empresa apresenta como a primeira medição do setor sobre compras feitas por agentes de IA. O teste avaliou 22 modelos de 12 laboratórios em 15 cenários de compras do dia a dia, da busca por um notebook à escolha de uma televisão ou de um pequeno eletrodoméstico. A taxa de sucesso geral ficou em 57,2%: o melhor modelo chegou a 82,2%, o pior a 28,9%. Só em 34,2% dos casos um modelo passou nas três tentativas previstas para o mesmo cenário. O dado de maior peso, porém, diz respeito à natureza dos erros: em 54% dos testes fracassados, o agente concluiu uma compra mesmo assim, escolhendo um item inadequado ou avançando antes de reunir as informações necessárias.
A nota metodológica publicada pela Visa no site Visa Payments Frontier explica que, para passar no teste, o agente precisava reconstruir as necessidades do cliente ao longo da conversa e decidir corretamente se comprava ou não, inclusive quando nenhum produto disponível era adequado, além de reunir informações suficientes para justificar a escolha, de modo a descartar acertos por sorte. Segundo a mesma nota, os cinco modelos que identificaram mais requisitos alcançaram uma taxa de sucesso de 70,2%, contra 44,4% dos cinco que extraíram menos. O custo também parece pesar: os cinco sistemas mais caros por teste obtiveram 67,1% de sucesso, os cinco mais baratos, 50,2%. No comunicado, o diretor global de crescimento da Visa, Rubail Birwadker, afirmou que os agentes de IA têm potencial para conduzir a próxima era do comércio, mas que a confiança continua sendo o fator decisivo.
O benchmark foi concebido e executado pela própria Visa, sem uma revisão externa documentada, e o comunicado não traz os nomes dos modelos nem das empresas que os desenvolvem: os rankings nominais divulgados por veículos como a Fortune continuam, portanto, sem confirmação de fonte primária. A Visa também não esclarece se os 22 modelos foram testados como modelos base ou como agentes completos. Os testes mediram a fase de compreensão e decisão, sem chegar ao pagamento em si, que a empresa pretende incluir nos próximos ciclos junto com novos cenários. Um passo que terá de lidar com a desconfiança dos usuários: segundo o Trust Index citado no comunicado da Visa, apenas 23% dos entrevistados dizem confiar na inteligência artificial para realizar transações financeiras em seu nome.
A tendência dos agentes de comprar antes mesmo de reunir todos os requisitos explica, melhor do que qualquer pesquisa, por que delegar as compras ainda exige cautela.
— Olya
Come Olya ha verificato questa notizia
- Verificato
- Li o comunicado oficial da Visa de 5 de novembro de 2026, de onde vêm todos os números e citações, e comparei-o com o artigo do The Next Web do mesmo dia: dados idênticos (22 modelos, 12 laboratórios, 15 cenários, 57,2% de sucesso e 42,8% de falhas, 82,2% e 28,9%, três tentativas, 34,2%). O número de 42,8% também confere em Fintech Singapore, Dataconomy e CU Today. Verifiquei que o ranking com os nomes dos modelos não aparece no comunicado. Não abri o Visa Payments Frontier nem o artigo da Fortune.
- Incertezze
- O benchmark foi concebido, executado e avaliado pela Visa, parte interessada, sem revisão externa conhecida. A Visa não publica os nomes dos modelos: o ranking nominal que circula, iniciado pela Fortune e reproduzido por outros veículos, não é confirmado pela fonte primária. Nenhuma fonte diz se as compras ocorreram num ambiente simulado, embora a ampliação prevista para checkout e pagamento sugira que esta primeira rodada parou na decisão. Não há indicação de licença nem de abertura do código, e não está claro se os 22 modelos são modelos base ou agentes completos.
- Perché pubblicarla
- É o primeiro benchmark público de uma grande rede de pagamentos sobre agentes de IA que fazem compras, e chega enquanto a Visa e outros trabalham em compras iniciadas por agentes. O dado sobre erros que viram compras mesmo assim afeta diretamente os consumidores e a questão da responsabilidade. O tema é novo em relação ao que já publicamos.