NovoComo detectamos um vendedor que oferece o modelo errado, e reembolsamos você se isso acontecer.
UberLLM

Como a UberLLM detecta um vendedor listando o modelo errado

Um preço baixo só vale a pena se você receber o modelo pelo qual pagou. Na UberLLM, a oferta de um vendedor é verificada quatro vezes: o modelo deve corresponder ao que foi listado, deve passar em nossos testes antes que qualquer comprador o acesse, uma pessoa da nossa equipe deve aprová-lo, e continua sendo testado em requisições ao vivo. Uma oferta que falha é interrompida imediatamente. Um vendedor pego servindo um modelo diferente é banido, e os compradores que ele atendeu são reembolsados de seus ganhos não pagos.

Por que isso importa

UberLLM é um marketplace: vendedores listam capacidade ociosa para um modelo, e sua requisição vai para o vendedor saudável mais barato. Isso só funciona se um vendedor que lista Claude ou DeepSeek V4 realmente serve Claude ou DeepSeek V4, e não um modelo mais barato por trás do nome certo. Então, verificamos cada oferta, o tempo todo.

Um caso real, flagrado esta manhã

Em 11 de novembro de 2026, um vendedor listou DeepSeek V4 Flash. Quando nosso teste perguntou o que era, ele respondeu: "I’m ChatGPT, developed by OpenAI." A oferta foi interrompida no momento em que falhou, às 02:38 UTC de 12 de novembro. Ainda não havia sido aprovada, portanto nenhum comprador jamais a alcançou.

As quatro verificações

1. Na listagem: o modelo precisa corresponder

  • Um vendedor pode listar apenas através de um provedor da nossa lista, como OpenRouter, Groq, Together AI, Fireworks AI ou Amazon Bedrock, com sua própria key lá. O provedor executa o modelo, não o vendedor. O próprio servidor de um vendedor não pode ser listado.
  • O nome do provedor para o modelo deve estar na própria lista de modelos desse provedor, e deve ser o mesmo modelo que o listado. Um vendedor não pode listar Claude e apontá-lo para um modelo mais barato.
  • Uma oferta que não responde a uma primeira solicitação de teste nunca é listada.

2. Antes de qualquer comprador: um teste de entrada

Toda nova oferta passa por testes que se parecem com o uso normal. Comparamos o que retorna com uma cópia confiável do mesmo modelo:

  • Como ele conta tokens. Cada família de modelos conta o texto à sua maneira, então um modelo de outra família se revela.
  • Quem ele diz que é. Perguntado sobre o que é, um modelo falso frequentemente nomeia seu verdadeiro criador, como no exemplo acima.
  • Perguntas com uma única resposta correta. Um modelo menor erra mais delas.
  • Como ele escreve, lado a lado com o modelo real.
  • Nada adicionado. Instruções ocultas adicionadas à sua solicitação também aparecem.

Em seguida, vem um teste com cópias de solicitações reais (você ainda recebe sua resposta de uma oferta já verificada), e um período de avaliação em uma pequena parcela do tráfego.

3. Uma pessoa o aprova

Uma pessoa da nossa equipe revisa toda oferta. Nenhum comprador acessa uma oferta antes dessa revisão. Uma nova key, provedor ou modelo conta como uma nova oferta e recomeça a partir da etapa 1.

4. Em solicitações ao vivo: as verificações nunca param

  • O modelo nomeado em cada resposta é comparado com o modelo listado.
  • Solicitações de teste continuam chegando enquanto a oferta estiver listada, e elas percorrem o mesmo caminho que suas solicitações.
  • Respostas enviadas aos compradores são pontuadas em busca de sinais de um modelo diferente. Uma pontuação alta envia a oferta para nossa equipe.
  • Uma oferta cujo provedor diz que sua key não funciona mais é retirada automaticamente.

Não publicamos como os testes funcionam ou quando são executados. Isso ensinaria um trapaceiro o que evitar.

Quando um vendedor é pego

  • A oferta para imediatamente, e o vendedor não pode reativá-la.
  • Os pagamentos do vendedor são retidos enquanto nossa equipe analisa as provas.
  • Um vendedor pego servindo um modelo diferente é banido: todas as ofertas param, e a mesma API key de provedor, endereço de pagamento e e-mail não podem listar novamente.
  • Ganhos ainda não pagos vão para reembolsar os compradores que ele atendeu.

Os números até agora

No primeiro dia de verificações, 31 de outubro de 2026, 10 ofertas foram paradas. Uma vendia como Claude, mas dizia ser "GPT-5 da OpenAI". Outras adicionavam cerca de 4,400 tokens de instruções ocultas a cada requisição.

Até 12 de novembro de 2026: 336 ofertas de vendedores testadas, 150 falharam e foram paradas, 3 vendedores banidos, e 32,969 requisições de teste nos últimos 7 dias. Os números em tempo real estão na página de verificações de modelos.

O que nenhuma verificação pode provar

Dizemos isso abertamente: nenhuma verificação de software pode provar qual cópia exata de um modelo escreveu uma resposta. Apenas a atestação de hardware pode, e o UberLLM não a possui. Uma cópia compactada (8-bit ou 4-bit) de um modelo aberto pode passar, então os vendedores devem declarar a precisão que oferecem, e uma declaração falsa os leva ao banimento. A lista completa está na página de verificações de modelo.

O que você pode fazer

  • Nada, por padrão. Suas solicitações chegam apenas a ofertas de provedores verificados que passaram nos testes e na revisão da nossa equipe.
  • Escolha quem te atende. provider.only ou provider.deny em uma solicitação seleciona ou bloqueia rotas. Veja seus controles.
  • Acha que uma resposta veio do modelo errado? Envie um e-mail para [email protected] com o X-Request-Id da resposta (o mesmo id da sua linha em Activity). Testaremos essa oferta novamente.

Continue lendo

Perguntas frequentes

Como a UberLLM sabe que um vendedor está servindo o modelo que ele lista?

O modelo do provedor deve corresponder ao modelo listado quando a oferta é publicada. Então, cada oferta é testada contra uma cópia confiável do mesmo modelo (como ele conta tokens, quem ele diz ser, como ele responde a perguntas com uma resposta correta, como ele escreve), aprovada por uma pessoa, e testada novamente em requisições ao vivo enquanto estiver listada.

O que acontece com um vendedor pego servindo um modelo diferente?

A oferta é interrompida imediatamente e os pagamentos do vendedor são retidos. O vendedor é banido: todas as ofertas são interrompidas e a mesma provider key, payout address e email não podem listar novamente. Ganhos ainda não pagos são usados para reembolsar os compradores que ele atendeu.

A UberLLM pode provar qual modelo escreveu uma resposta?

Não com certeza: apenas a atestação de hardware pode, e UberLLM não a possui. Os testes detectam um modelo diferente e instruções ocultas. Uma cópia de menor precisão de um modelo aberto ainda pode passar, e é por isso que os vendedores devem declarar sua precisão e as respostas ao vivo continuam sendo verificadas.