拿到分类标签和分数之后,先把缺标签、缺分和低分结果留下。本练习用 5 条虚构记录,在阈值 0.8 时得到 3 条待人工复核与 2 条建议抽查,下载报告后可以逐条交接。
作者:JevLog 编辑部 · 2026-10-02 更新。这里只演练本地队列规则,不调用 Jev,不校准模型概率,也不把分数称作准确率。
打开人工复核队列生成器 · 下载输入 review-queue-demo.csv · 下载预期报告 JSON · 下载预期待复核队列 CSV

先确认输入分数的含义
Section titled “先确认输入分数的含义”工具接受稳定 ID、建议标签与已归一化到 0–1 的数值。样例列名是 id,text,label,confidence,source;confidence 是教学字段,不保证对应某个 Jev 接口的原始返回字段。真实接口要先核对分数定义并通过适配层整理,不要把 85 自动当成 0.85,也不要把任意相似度称作正确概率。
1. 载入样例并运行
Section titled “1. 载入样例并运行”选择 ID 列 id、标签列 label、分数列 confidence,保留练习阈值 0.8,然后运行。每个文件最多 5 MB;浏览器本机处理文件,不需要登录。
2. 核对五条记录的去向
Section titled “2. 核对五条记录的去向”| ID | 建议标签 | 分数 | 去向 | 原因 |
|---|---|---|---|---|
| 1 | billing | 0.91 | 建议抽查 | 达到练习阈值 |
| 2 | technical | 0.60 | 人工复核 | 低于练习阈值 |
| 3 | other | 空 | 人工复核 | 分数缺失 |
| 4 | billing | 0.85 | 建议抽查 | 达到练习阈值 |
| 5 | 空 | 0.96 | 人工复核 | 建议标签缺失 |
摘要应为 记录数 5、待人工复核 3、可供抽查 2、缺失或非法分数 1、建议标签缺失 1。两种去向互斥,3 + 2 = 5;问题原因计数不一定互斥,一条记录可能同时缺标签和缺分。
3. 看清阈值边界
Section titled “3. 看清阈值边界”分数低于阈值才因低分进入复核,等于阈值会留在建议抽查。把阈值改成 0.6 后,ID 2 不再因低分入队,预期是复核 2、抽查 3;ID 3 和 ID 5 仍然复核。缺标签、空分数、非数字、越出 0–1 的值都不能靠降低阈值通过。
0.8 和 0.6 只是练习参数。业务阈值要在经过人工确认的样本上选择,同时查看漏过的错误、人工成本与不同类别,不以复核比例越低越好作为目标。
4. 下载两种不同的交接文件
Section titled “4. 下载两种不同的交接文件”review-report.csv或review-report.json:完整结果,含五条记录的去向、原因及可用原文。JSON 还包含待复核队列。review-queue.csv:只含待复核的 ID 2、3、5,保留全部输入列,包括source,末尾增加jevlog_review_reason。若输入已有这个列名,工具使用带_2后缀的不冲突列名。
页面表格会展示 text、feedback 或 message 中识别到的原文列。若原文使用其他列名,队列下载仍保留它,但页面原文栏可能为空。下载的 CSV 为表格查看而防护类似公式的单元格;需要核对原值时保留 JSON 和原文件。
5. 人工结论另外记录
Section titled “5. 人工结论另外记录”在你的交接表中另记 id, suggested_label, final_label, review_reason, reviewer, reviewed_at, rule_version,保留初始建议和原文。确认、改标、暂缓都要能说明原因。当前工具生成队列,没有在线审核账户、多人任务分配或自动保存人工修改;这些结论需要你在自己的表格或系统里保存。
将人工结论按稳定 ID 对回输入,核对总数与没有处理完的记录。若下一版规则改变,用 分类结果对比器 查看哪些记录变了,并保存人工结论版本。
常见问题与排错
Section titled “常见问题与排错”如果有请求失败,但标签和分数仍存在呢?
Section titled “如果有请求失败,但标签和分数仍存在呢?”这个工具只按标签、分数和阈值分流,不读取 status 或 error 自动识别技术失败。适配真实结果时,应单独保留失败队列,防止失败记录沿用旧标签或旧分数后混入抽查队列。
重复 ID、缺列或列错位怎么处理?
Section titled “重复 ID、缺列或列错位怎么处理?”空 ID、重复 ID、列数异常会阻止生成可靠队列;ID、标签和分数必须选择不同的存在列。先用 CSV 预检器 修复结构问题;非法分数与缺标签则保留在结果中等待复核。
刷新后队列还在吗?
Section titled “刷新后队列还在吗?”不在。刷新前下载完整报告和待复核队列;之后重新选择输入与阈值即可重跑。无需登录。建议抽查也不是批准执行,页面不会回复客户、退款或调用外部系统。
继续做一个完整流程
Section titled “继续做一个完整流程”CSV 预检教程 → 工单分类练习 → 当前复核练习 → 分类标签变更对比。
样例与预期报告来自本站当前本地规则。它们能验证队列生成过程,不能证明 Jev 的线上效果、分数校准程度或业务自动化收益。