Uma prévia dos mercados Agentic

Uma recente experiência antrópica pode oferecer uma ideia de como o comércio agente poderia funcionar em mercados bilaterais, onde compradores e vendedores negociam preços.

Chamado “Acordo de projeto“, o teste comparou dois grandes modelos de linguagem para determinar se sistemas de IA mais fortes ganhariam uma vantagem em mercados autónomos. Embora a experiência não preveja necessariamente como os agentes de IA negociariam com os humanos no comércio do mundo real, revelou diferenças de modelo e cegueira dos utilizadores em relação a resultados económicos mais fracos.

Acordo de projeto

A Anthropic conduziu o experimento em um mercado interno de funcionários do Slack. Sessenta e nove funcionários permitiram que os agentes da Claude AI negociassem a compra e venda de itens reais em seu nomeincluindo livros, artigos esportivos e produtos domésticos.

Uma vez aberto o mercado, os agentes passaram a operar de forma autônoma, propondo preços, respondendo a contraofertas e fechando negócios sem aprovação humana.

Em quatro execuções de mercado separadas, os agentes completaram 186 transações, totalizando cerca de US$ 4.000. Um estudo de regressão subsequente resultou em 782 transações com valores acima de US$ 15.000.

A Antrópica variou intencionalmente a capacidade dos modelos de IA participantes, usando o Opus mais avançado para alguns funcionários e o Haiku menor para outros.

A empresa observou que o desenho do experimento reflete interesse crescente entre economistas e pesquisadores de IA no que alguns chamam de “interações agênticas”, nas quais os sistemas de IA vão além da recuperação de informações e começam a atuar como participantes económicos.

Vantagem Econômica

Durante o teste do Project Deal, a Anthropic descobriu que o modelo Opus mais forte geralmente alcançou melhores resultados económicos do que o modelo Haiku menor, mas não necessariamente porque completou significativamente mais transações.

Em vez disso, as diferenças apareceram principalmente no desempenho das negociações.

De acordo com Dados da Antrópicoos agentes da Opus ganharam US$ 2,68 a mais por transação ao vender itens e pagaram US$ 2,45 a menos ao comprar itens. As diferenças de preços foram relativamente pequenas em termos de dólares, mas significativas em relação ao preço médio de transação do experimento, de cerca de US$ 12.

A Anthropic também conduziu uma comparação mais restrita de itens pareados. Olhando apenas para itens idênticos vendidos por modelos diferentes em todas as tiragens, os vendedores do Opus ganharam em média US$ 3,64 a mais pelo mesmo item do que os vendedores representados pelo modelo Haiku mais fraco.

Em outras palavras, modelos mais capazes poderiam ser uma vantagem competitiva significativa no mercado. A empresa teve o cuidado de mencionar que o Project Deal “não reflete como pensamos que os agentes deveriam ser implantados no mundo real”.

Preço Fixo

O resultado sugere que os vendedores online que implementam agentes vendedores de IA “melhores” poderiam ganhar significativamente mais em alguns mercados?

A resposta pode ser não.

Hoje, a maioria das transações de comércio eletrônico são compras a preço fixo, e não negociações. Portanto, o comércio de agentes, em que os agentes de IA compram em nome de pessoas, pode não ser aplicável.

Por outro lado, muitos mercados bilaterais ainda incluem elementos de negociação, otimização de preços ou preços dinâmicos.

Os exemplos incluem:

• Ofertas do eBay,
• Negociações do Facebook Marketplace,
• Transações Craigslist,
• Fornecimento por atacado,
• Leilões de publicidade,
• Mercados de frete,
• Plataformas de compras.

Neste tipo de trocas, um sistema de IA relativamente mais forte poderia, teoricamente, produzir vantagens económicas mensuráveis ​​sobre sistemas mais fracos ou negociadores humanos.

Se trocas de agentes Se expandir, a própria capacidade do modelo poderá tornar-se uma forma de vantagem competitiva semelhante à eficiência logística, ao acesso a dados de mercado ou à sofisticação da publicidade.

Dólares, não negócios

Embora a vantagem económica obtida com os agentes de IA na experiência do Project Deal tenha sido significativa, também foi matizada. Por exemplo, as diferenças estatísticas entre Opus e Haiku na conclusão de negócios foram relativamente pequenas, de acordo com a Anthropic.

Ambos os modelos, se preferir, podem fechar a venda. Vale a pena mencionar isso porque, num futuro próximo, os comerciantes poderão avaliar os agentes de IA da mesma forma que avaliam as campanhas publicitárias ou o desempenho do mercado hoje. Em vez de se concentrarem apenas nas transações concluídas, os vendedores poderiam começar a medir:

• Preço médio de venda negociado,
• Economia em compras,
• Melhoria de margem,
• Consistência de preços,
• Receita por transação.

Cegueira do usuário

Talvez a descoberta mais surpreendente do Project Deal não tenha sido a diferença entre os modelos de IA em si, mas a forma como os humanos responderam a essas diferenças.

Os participantes humanos representados pelo modelo Haiku mais fraco relataram frequentemente níveis de satisfação e justiça semelhantes aos que usaram o modelo Opus mais forte, apesar de alcançarem resultados económicos mensuravelmente piores, de acordo com a Antrópico.

Por outras palavras, muitas pessoas não reconheceram que o seu agente de IA tinha negociado de forma menos eficaz em seu nome.

Essa descoberta poderá eventualmente se tornar importante em ambientes de comércio eletrônico e de mercado, onde os agentes de IA atuam de forma semi-autônoma para compradores ou vendedores.

Por exemplo, um comerciante que implementa um agente de compras de IA pode não reconhecer imediatamente que um modelo mais fraco paga consistentemente custos de fornecedor ligeiramente mais elevados. Da mesma forma, um vendedor de mercado que utiliza um agente de negociação menos capaz pode, sem saber, aceitar resultados de preços sistematicamente piores.

Com o tempo, mesmo desvantagens de preços relativamente pequenas podem aumentar em milhares de transações, compras de publicidade ou acordos de fornecimento.

Negociadores

No mínimo, o Project Deal da Anthropic demonstrou que os agentes de IA poderiam comprar e vender de uma forma estritamente focada. mercado.

Esse pequeno sucesso certamente deveria fazer a indústria pensar sobre o que acontece quando os agentes de IA estão, de fato, comprando e vendendo para as pessoas.