DEGRADATION · 降智
降智检测参考
「降智」指中转站在转发时偷偷改动模型的推理档位、系统提示或采样参数,让你拿到比官方更弱的输出。
三种常见降智手法
| 档位偷调 | 你请求 reasoning=high,站点实际以 low/none 转发——输出更快更便宜但更笨。 |
| 系统提示注入 | 在 system 里塞入「回答简洁」等指令压缩输出质量。 |
| 参数改写 | 偷偷改 temperature / max_tokens 上限,限制长推理。 |
怎么自查(现在就能做)
- 1. 同一难题分别在官方与中转各跑一次(同 prompt、同档位),对比推理长度与正确率。
- 2. 看响应的
reasoning_tokens:官方 high 档通常数千起,中转个位数即可疑。 - 3. 用我们的自助体检跑「模型真假 + metadata 行为」——档位偷调会反映在 token 分布偏离上。
自动化对照(v2 排期中)
方向:用官方同档跑标准题集做参照基线,中转请求与之自动对照。上线后本页更新入口。