Todas as configurações, num só gráfico.
Passo 1 de 4: O modelo
Mais preciso em todas as configurações, a um sétimo do custo.
Em todas as suas oito definições, o MS Duplex foi mais preciso do que uma cache semântica em qualquer uma das suas cinco, ou do que o GPT-5.5 sozinho na única que tem, nas mesmas 3,000 decisões. Mais três execuções, com fluxos novos, mostraram a mesma ordem.
Benchmarks internos. Todos os valores desta página provêm de testes realizados pela própria MatterSpace e não foram verificados de forma independente. Leia o aviso legal
- 94.1 a 94.8%*Precisão do MS Duplex, em cada uma das oito configuraçõesO melhor que uma cache alcançou: 77.3%
Precisão do MS Duplex, em cada uma das oito configurações MS Duplex 94.1 a 94.8% O melhor que uma cache alcançou 77.3% - 84 a 91%*Em três execuções novas de 1,000 decisõesO melhor que uma cache alcançou: cerca de 73%
Em três execuções novas de 1,000 decisões MS Duplex 84 a 91% O melhor que uma cache alcançou ≈73%
* Valores obtidos nos benchmarks internos da MatterSpace, não verificados de forma independente. Leia o aviso legal
O MS Duplex no seu pior supera uma cache no seu melhor.
A configuração menos precisa do MS Duplex contra a configuração mais precisa da cache.
Passo 1 de 2: Precisão
Na sua definição menos precisa, o MS Duplex obteve 94.1%. A cache, na sua mais precisa, obteve 77.3%.*
Ajustar uma cache não compra precisão.
A mesma cache, da correspondência mais permissiva à mais estrita.
Passo 1 de 3: Mais estrita
Apertar a correspondência de uma cache envia mais pedidos ao modelo: de 4 chamadas para 212.*
A mesma ordem, execução após execução.
Três execuções novas de 1,000 decisões cada, num segundo ambiente de teste, independente.
Passo 1 de 2: Precisão
Em três execuções novas, numa segunda configuração independente, o MS Duplex obteve 87.7%, e a melhor cache 73.0%.*
Como foi feito.
- O trabalho
- O mesmo fluxo de operações de clientes do resultado de custo: uma ação certa entre cerca de dezanove, ou uma recusa, com cinco mudanças de regra internas.
- Configurações
- O MS Duplex em oito configurações, da mais disposta a responder sozinha à mais cautelosa; uma cache semântica em cinco, da correspondência mais permissiva à mais estrita; o GPT-5.5 sozinho na única que tem.
- Escala
- Um fluxo de 3,000 decisões, depois três execuções independentes de 1,000 decisões num segundo ambiente de teste.
- Igual para todos
- As mesmas respostas registadas do GPT-5.5 para cada ponto, o mesmo retorno e as mesmas regras de recusa.
O que significa para o seu trabalho.
Estável em todas as definições.
As oito configurações do MS Duplex ficaram entre 94.1% e 94.8% de precisão.*
Uma precisão que uma cache não consegue alcançar.
Nas suas definições, a cache chegou no máximo a 77.3%, e a 44.2% depois de uma mudança de regra.*
Mais barato do que o modelo, em todos os casos.
Mesmo a configuração mais cautelosa do MS Duplex custou menos do que o GPT-5.5 sozinho, e foi 34 pontos mais precisa.*
A seguir: Continua a aprender sem esquecer, sem ficar desatualizado e sem crescer.Leia →
Veja-o no seu próprio trabalho.
Do seu próprio assistente a cada agente que a sua empresa opera, um piloto põe o MS Duplex no seu próprio trabalho, com as métricas acordadas antes de começar.