UberLLM 如何发现卖家列出错误模型
便宜的价格,只有当你获得所支付的模型时,才有意义。在UberLLM,卖家的服务会经过四重核查:模型在上线时必须与描述相符;在买家使用前,必须通过我们的测试;我们的团队成员必须人工审核通过;并且在实际请求中持续接受测试。任何不合格的服务都会立即下架。一旦发现卖家提供与描述不符的模型,将被永久封禁,其未结算收益将用于退还受影响买家的款项。
为什么这很重要
UberLLM 是一个市场:卖家列出模型的闲置容量,您的请求会发送给最便宜且健康的卖家。这只有在列出 Claude 或 DeepSeek V4 的卖家确实提供 Claude 或 DeepSeek V4,,而不是在正确名称背后提供更便宜的模型时才有效。因此,我们始终检查每一项报价。
今早发现一个真货
在 2026年11月11日,一位卖家上架了 DeepSeek V4 Flash。当我们的测试询问它是什么时,它回答说:“I’m ChatGPT, developed by OpenAI.” 该商品在它检测失败后立即被下架了,时间是 11 月 12 日 02:38 UTC。它尚未获得批准,因此,没有任何买家接触到它。
四项检查
1. 上架时:模型必须匹配
- 卖家只能通过我们列表中的提供商(例如 OpenRouter、Groq、Together AI、Fireworks AI 或 Amazon Bedrock)上架,并使用其在该提供商处的 API key。模型由提供商运行,而非卖家。卖家自己的服务器无法上架。
- 提供商对模型的命名必须在其自己的模型列表中,并且必须与上架的模型相同。卖家不能上架 Claude 却指向一个更便宜的模型。
- 未能响应首次测试请求的商品绝不会上架。
2. 任何买家购买前:入场测试
每项新商品都会经过模拟正常使用的测试。我们会将返回结果与同一模型的受信任副本进行比较:
- 如何计算 token。 每个模型系列都有自己的文本计数方式,因此来自不同系列的模型会显现出来。
- 它自称是谁。 当被问及身份时,假冒模型通常会说出其真正的制造商,如上例所示。
- 只有一个正确答案的问题。 较小的模型会答错更多此类问题。
- 它的写作方式,与真实模型并排比较。
- 没有额外添加。 添加到您的请求中的隐藏指令也会显现出来。
随后,我们会对真实请求的副本进行试用(您仍然会从已检查的商品中获得答案),并在少量流量中进行试运行。
3. 人工审核批准
我们团队中的一名成员会审核每项商品。在审核完成之前,买家无法接触到任何商品。新的 API key、提供商或模型都算作一项新商品,并从步骤 1 重新开始。
4. 实时请求:检查永不停止
- 每次回复中指定的模型都会与上架的模型进行比较。
- 只要商品在上架,测试请求就会持续发送,并且它们会与您的请求走相同的路径。
- 发送给买家的回复会根据是否存在不同模型的迹象进行评分。高分会将该商品发送给我们的团队。
- 如果提供商表示其 API key 不再有效,该商品将自动下架。
我们不会公布测试的工作原理或运行时间。这样做会教会作弊者如何规避。
当卖家被发现时
- 该商品立即下架,卖家无法重新上架。
- 卖家的款项将被冻结,直到我们的团队审查证据。
- 如果卖家被发现提供与描述不符的模型,将被封禁:所有商品立即下架,并且相同的提供商密钥、收款地址和电子邮件将无法再次发布商品。
- 尚未支付的收入将用于退款给受影响的买家。
迄今为止的数据
在检查的第一天,2026年10月31日,10 个商品被下架。其中一个商品声称是 Claude,却说是“OpenAI 的 GPT-5”。其他商品则在每个请求中添加了大约 4,400 个 token 的隐藏指令。
截至 2026年11月12日:已测试 336 个卖家商品,150 个失败并已下架,3 个卖家已被禁用,以及在过去 7 天内发出了 32,969 个测试请求。实时数据可在模型检查页面]上查看。
任何检查都无法证明
我们明确指出:任何软件检查都无法证明是模型的哪个确切副本生成了答案。只有硬件认证可以做到,而 UberLLM 不具备此功能。一个压缩的(8-bit 或 4-bit)开放模型副本可以通过,因此卖家必须声明他们提供的精度,虚假声明将导致他们被禁止。完整列表请参见模型检查页面。
您可以做什么
- 默认情况下,什么都不用做。 您的请求只会发送给通过了测试和我们团队审核的认证提供商。
- 选择谁为您服务。 请求中的
provider.only或provider.deny可以选择或阻止路由。请参阅 您的控制项。 - 认为回复来自错误的模型? 请将回复的
X-Request-Id(与“活动”中该行对应的 ID 相同)通过电子邮件发送至 [email protected]。我们将再次测试该服务。