Neutoken EvaluatorWeb 控制台
登录
Web 控制台

Neutoken Evaluator 评测控制台

对任意 OpenAI 兼容网关做「资源可用性 / 官方符合度 / 真假 / 安全」四轴评测。触发后实时查看逐用例进度与评分，完成后可导出单页 HTML 报告；支持 smoke 低成本验证与 full 完整评测。

1

评测目标

确定评测哪个模型；契约来自内置 profiles， 未知模型请先登记 profile。

被测模型的 profile id；报告会按该契约判定。

供应商的唯一键（必填），用于历史报告精确筛选； 字母/数字开头，可含 - _ .。

仅用于报告归属与历史筛选，不影响判定。

2

连接与鉴权

评测请求发往哪里、用什么凭据。

被测网关的 OpenAI 兼容 base_url；仅 http/https，内网地址默认拒绝。

Anthropic Messages 的地址前缀（自动补 /v1/messages）；留空则由被测端点推导。

仅内存使用，经环境变量注入评测子进程；不写入数据库/日志/报告。

3

评测范围与预算

smoke 约 28 个请求，适合先验证通路； full 约 155 个请求并产生费用。

full 必须同时勾选下方费用确认才会触发。

请求硬上限，达到后剩余用例记 skip；留空按默认处理。

高级选项（用例范围 / 限流 / 开关）
触发是唯一写操作（POST）；程序集成请用 POST /api/runs（JSON）。