CL
checkllm
Shared Result
gpt-5.4
当前 endpoint 可能仍属于同品牌模型,但有较强的低配或降级嫌疑。
Overall Risk
9/100
Low Risk
Run Metadata
Provider
openai
API Style
responses
Source
www.packyapi.com
Run At
2026年5月14日 04:40
Dimension Scores
分项维度
分数越高表示该维度越接近期望表现,风险判断会结合这些分项与最终结论一起给出。
protocol_conformity_score
100
stream_conformity_score
100
usage_consistency_score
90
behavior_fingerprint_score
95
capability_tool_score
90
tier_fidelity_score
69
route_integrity_score
96
Markdown Report
检测报告正文
以下内容直接来自 engine 生成的原始 Markdown 报告。
模型校验报告
一句话结论
当前 endpoint 可能仍属于同品牌模型,但有较强的低配或降级嫌疑。
风险摘要
- 总风险分
9/100。对应模型能力范围相匹配。 - 功能指标总分
96/100,智能指标总分84/100。 - 功能侧看协议一致性
100、流式一致性100、Usage 一致性90、路径完整性96。 - 智能侧看行为指纹
95、工具/函数能力90、档位保真69。 - 思考支持判断:已检测到,本次探测出现了活跃的 reasoning 信号。
- Prompt 缓存支持判断:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。
- 本次鉴定累计消耗 token:输入
2656,输出1039,合计3695。
为什么这么判定
- Tier fidelity is below the current baseline or historical norm.
- 包装层洁净度为
1.000,越接近 1 越像未被额外包装。 - 低频语言身份自报一致性为
0.750,越低越可疑。 - 同一交互内身份稳定性为
1.000,越低越说明身份容易被改写。 - Usage 偏差率为
1.671,越高越说明返回的 token 口径与本地估算差距越大。 - 平均首事件延迟为
527 ms。 - 工具调用命中率为
1.000。 - 工具参数匹配度为
1.000。 - 工具结果后续回答匹配度为
1.000。这项指标当前主要在看模型拿到 tool result 后,能否继续产出正确最终答案;若值异常,请优先查看 run archive 中是否记录了 follow-up request/response/error,以区分 endpoint 链路问题与 follow-up 交互兼容性问题。 - 长上下文多跳定位通过率为
1.000。 - reasoning 启用增益为
0.0000,正值说明 reasoning-on 用例整体优于 reasoning-off。 - 已检测到思考能力信号,本次探测中出现了 reasoning 摘要、非零 reasoning token 或启用中的 reasoning 配置。
- 已检测到 prompt cache 相关字段,但本次探测未观察到实际缓存命中。
功能指标
- 功能指标总分:
96/100,表现稳定,接近预期。。 - 协议一致性:
100/100,表现稳定,接近预期。。 - 流式一致性:
100/100,表现稳定,接近预期。。 - Usage 一致性:
90/100,表现稳定,接近预期。。 - 路径完整性:
96/100,表现稳定,接近预期。。 - Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。
智能指标
- 智能指标总分:
84/100,有一定偏差,但还不算严重。。 - 行为指纹:
95/100,表现稳定,接近预期。。 - 工具/函数能力:
90/100,表现稳定,接近预期。。 - 这项总分包含两层含义:工具调用执行,以及拿到 tool result 后的最终续答。,工具调用命中率
1.000,参数匹配度1.000,结果续答匹配度1.000。 - 档位保真:
69/100,偏差已经比较明显。。 - 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。
网络指标
- 平均总延时:
1413 ms。 - P95 总延时:
2541 ms。 - 平均首包时间:
527 ms。 - 平均输出吞吐:
15.25 tokens/s。 - 平均流式事件数:
11.00。 - 超时次数:
0。 - 成功探测数:
46。
指标总览
- 功能指标总分:
96/100,表现稳定,接近预期。 - 智能指标总分:
84/100,有一定偏差,但还不算严重。 - 协议一致性:
100/100,表现稳定,接近预期。 - 流式一致性:
100/100,表现稳定,接近预期。 - Usage 一致性:
90/100,表现稳定,接近预期。 - 行为指纹:
95/100,表现稳定,接近预期。 - 工具/函数能力:
90/100,表现稳定,接近预期。 - 档位保真:
69/100,偏差已经比较明显。 - 路径完整性:
96/100,表现稳定,接近预期。 - 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。
- Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。
建议动作
- 补做更高难度的长上下文、结构化输出和代码任务,确认是否存在同品牌降级。
元数据
run_at: 2026-05-14T04:40:58Z
provider: openai
model: gpt-5.4
base_url: https://www.packyapi.com/v1
archive_path: docs/runs/res_7e8da837-7065-4cf0-a2f9-0452dfde2eb1.md
total_input_tokens: 2656
total_output_tokens: 1039
total_tokens: 3695
原始分数
protocol_conformity_score: 100
stream_conformity_score: 100
usage_consistency_score: 90
behavior_fingerprint_score: 95
capability_tool_score: 90
tier_fidelity_score: 69
route_integrity_score: 96
functional_score: 96
intelligence_score: 84
overall_risk_score: 9
指标状态
- 功能指标:
96/100,正常 - 协议一致性:
100/100,正常 - 流式一致性:
100/100,正常 - Usage 一致性:
90/100,正常 - 路径完整性:
96/100,正常 - 智能指标:
84/100,显著偏离 - 行为指纹:
95/100,正常 - 工具/函数能力:
90/100,正常 - 档位保真:
69/100,显著偏离 - 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。
- Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。