TrueOpen
TRUEOPEN / 实验报告

Worker-Verifier Model Identity Verification with Logprobs and Routed Experts: An Experimental Study

TrueOpen.ai team · 原文未标注发布日期

概率轨迹能告诉我们推理响应背后运行了什么模型吗?

问题、结果与适用边界

随附的 Worker-Verifier 报告比较 Qwen3-32B BF16 Worker 与参考配置,使用 vLLM 0.23.0、batch size 8 和 64 个 logprob;Worker 输出 36,882 行。下表只摘录 6000ws Verifier 的结果,不能推广为任意商业 API 的检测效果。

在这一受控稠密模型实验中,FP8 和 AWQ 的 p99 偏差高于 BF16。阈值必须考虑正常的运行时和硬件差异。不一致是需要调查的信号,不自动等同于故意作弊。

对于 Qwen3.6-35B-A3B,报告发现 logprob 尖峰稀疏且依赖位置。第 0 层专家路由比较可增加信息。如果供应商不提供合适的 token 轨迹或路由信息,此方法可能无法得出结论。

记录生成轨迹 → 重放固定 token → 比较偏差指标 → 使用已校准阈值1记录生成轨迹→2重放固定 token→3比较偏差指标→4使用已校准阈值统计一致性证据,不是完整执行的密码学证明。
TrueOpen 方法解读图,用于说明流程,不是新增实验测量结果。

已发布证据

下载报告与结果包

ZIP 包包含报告文件及已发布结果表,不是完整原始日志数据集。可用运行材料及复现说明见代码仓库。

补充实验背景

引用格式

@techreport{trueopen_model_identity,
  title = {Worker-Verifier Model Identity Verification with Logprobs and Routed Experts: An Experimental Study},
  author = {{TrueOpen.ai team}},
  institution = {TrueOpen},
  url = {https://www.trueopen.ai/research/model-identity/},
  note = {Publication date not stated in the source}
}

原始材料未标注发布日期,未根据下载文件名或仓库时间推断。作者确认日期前,书目信息仍不完整。

统计一致性证据,不是完整执行的密码学证明。 这不是独立安全审计。