docs

LLM API 验证观测:为什么样本量重要(2026 年 11 月)

2026 年 11 月 4 日的 ModelVerify 公开观测快照包含 2,590 个端点主机名分组,共保留 7,970 条诊断样本。其中 1,365 个分组只有一条诊断样本。阅读匹配率时,需要先看样本深度。

← 返回文档目录

统计时间:2026 年 11 月 4 日 02:50:57 UTC。来源为当时的公开服务商汇总接口。诊断样本按现有汇总口径,指具有身份判定和模型标签的保留观测;不等于所有请求、全部历史测试或独立用户数。

按诊断样本量划分:无诊断样本 6 个主机名分组;一条样本 1,365 个;二至九条 1,097 个;十条及以上 122 个。四组共计 2,590 个;其中 890 个分组在接口统计的最近 30 天内有诊断观测。分组数量不代表独立服务商数量。

一条匹配观测可以形成 100% 的显示匹配率,但证据深度与多模型、多次观测不同。即使样本达到十条,也不是可靠性的合格门槛:账号、别名、路由、时间和任务分布仍可能不同,重复测试也未必独立。

本简报是自选公开样本的描述性快照,没有上一期可比快照来判断变化趋势,也不能估计市场中的模型替换比例。主机名分组不是经过独立核实的企业;多个主机名可能属于同一家服务商。

选择 API 时,先核对样本数量、模型标签、最近观测时间和自己的实际配置,再阅读匹配、不匹配及不确定结论。不要将一次不匹配视为欺诈证明,也不要将一次匹配视为对未来所有请求的保证。公开服务商页的实时数字会继续变化,本简报保留上述固定日期快照。

数据来源:ModelVerify 公开服务商列表 /zh-CN/providers。可下载的固定汇总:/research/provider-evidence-2026-11-04.json。统计只包含分组数量与样本量汇总,不含个人报告、密钥或端点凭证。