CL

checkllm

Shared Result

gpt-5.4

当前 endpoint 可能仍属于同品牌模型,但有较强的低配或降级嫌疑。

Overall Risk

9/100

Low Risk

Run Metadata

Provider

openai

API Style

responses

Source

www.packyapi.com

Run At

2026年5月14日 04:40

Dimension Scores

分项维度

分数越高表示该维度越接近期望表现,风险判断会结合这些分项与最终结论一起给出。

protocol_conformity_score

100

stream_conformity_score

100

usage_consistency_score

90

behavior_fingerprint_score

95

capability_tool_score

90

tier_fidelity_score

69

route_integrity_score

96

Markdown Report

检测报告正文

以下内容直接来自 engine 生成的原始 Markdown 报告。

模型校验报告

一句话结论

当前 endpoint 可能仍属于同品牌模型,但有较强的低配或降级嫌疑。

风险摘要

  • 总风险分 9/100。对应模型能力范围相匹配。
  • 功能指标总分 96/100,智能指标总分 84/100
  • 功能侧看协议一致性 100、流式一致性 100、Usage 一致性 90、路径完整性 96
  • 智能侧看行为指纹 95、工具/函数能力 90、档位保真 69
  • 思考支持判断:已检测到,本次探测出现了活跃的 reasoning 信号。
  • Prompt 缓存支持判断:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。
  • 本次鉴定累计消耗 token:输入 2656,输出 1039,合计 3695

为什么这么判定

  • Tier fidelity is below the current baseline or historical norm.
  • 包装层洁净度为 1.000,越接近 1 越像未被额外包装。
  • 低频语言身份自报一致性为 0.750,越低越可疑。
  • 同一交互内身份稳定性为 1.000,越低越说明身份容易被改写。
  • Usage 偏差率为 1.671,越高越说明返回的 token 口径与本地估算差距越大。
  • 平均首事件延迟为 527 ms
  • 工具调用命中率为 1.000
  • 工具参数匹配度为 1.000
  • 工具结果后续回答匹配度为 1.000。这项指标当前主要在看模型拿到 tool result 后,能否继续产出正确最终答案;若值异常,请优先查看 run archive 中是否记录了 follow-up request/response/error,以区分 endpoint 链路问题与 follow-up 交互兼容性问题。
  • 长上下文多跳定位通过率为 1.000
  • reasoning 启用增益为 0.0000,正值说明 reasoning-on 用例整体优于 reasoning-off。
  • 已检测到思考能力信号,本次探测中出现了 reasoning 摘要、非零 reasoning token 或启用中的 reasoning 配置。
  • 已检测到 prompt cache 相关字段,但本次探测未观察到实际缓存命中。

功能指标

  • 功能指标总分:96/100,表现稳定,接近预期。。
  • 协议一致性:100/100,表现稳定,接近预期。。
  • 流式一致性:100/100,表现稳定,接近预期。。
  • Usage 一致性:90/100,表现稳定,接近预期。。
  • 路径完整性:96/100,表现稳定,接近预期。。
  • Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。

智能指标

  • 智能指标总分:84/100,有一定偏差,但还不算严重。。
  • 行为指纹:95/100,表现稳定,接近预期。。
  • 工具/函数能力:90/100,表现稳定,接近预期。。
  • 这项总分包含两层含义:工具调用执行,以及拿到 tool result 后的最终续答。,工具调用命中率 1.000,参数匹配度 1.000,结果续答匹配度 1.000
  • 档位保真:69/100,偏差已经比较明显。。
  • 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。

网络指标

  • 平均总延时:1413 ms
  • P95 总延时:2541 ms
  • 平均首包时间:527 ms
  • 平均输出吞吐:15.25 tokens/s
  • 平均流式事件数:11.00
  • 超时次数:0
  • 成功探测数:46

指标总览

  • 功能指标总分:96/100,表现稳定,接近预期。
  • 智能指标总分:84/100,有一定偏差,但还不算严重。
  • 协议一致性:100/100,表现稳定,接近预期。
  • 流式一致性:100/100,表现稳定,接近预期。
  • Usage 一致性:90/100,表现稳定,接近预期。
  • 行为指纹:95/100,表现稳定,接近预期。
  • 工具/函数能力:90/100,表现稳定,接近预期。
  • 档位保真:69/100,偏差已经比较明显。
  • 路径完整性:96/100,表现稳定,接近预期。
  • 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。
  • Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。

建议动作

  • 补做更高难度的长上下文、结构化输出和代码任务,确认是否存在同品牌降级。

元数据

run_at: 2026-05-14T04:40:58Z
provider: openai
model: gpt-5.4
base_url: https://www.packyapi.com/v1
archive_path: docs/runs/res_7e8da837-7065-4cf0-a2f9-0452dfde2eb1.md
total_input_tokens: 2656
total_output_tokens: 1039
total_tokens: 3695

原始分数

protocol_conformity_score: 100
stream_conformity_score: 100
usage_consistency_score: 90
behavior_fingerprint_score: 95
capability_tool_score: 90
tier_fidelity_score: 69
route_integrity_score: 96
functional_score: 96
intelligence_score: 84
overall_risk_score: 9

指标状态

  • 功能指标:96/100,正常
  • 协议一致性:100/100,正常
  • 流式一致性:100/100,正常
  • Usage 一致性:90/100,正常
  • 路径完整性:96/100,正常
  • 智能指标:84/100,显著偏离
  • 行为指纹:95/100,正常
  • 工具/函数能力:90/100,正常
  • 档位保真:69/100,显著偏离
  • 思考支持:已检测到,本次探测出现了活跃的 reasoning 信号。
  • Prompt 缓存支持:已检测到 prompt cache 相关字段,但本次未观察到实际缓存命中。