跳转到内容
原创教程公开来源整理

分类结果人工复核教程:低分、缺分与缺标签怎么分流

用 5 条结果复现 3 条待复核队列,并保存可交接的报告。

适用场景把技术失败、缺信息和低信号建议送进不同人工队列

来源 · JevLog 原创Beginner10 分钟

拿到分类标签和分数之后,先把缺标签、缺分和低分结果留下。本练习用 5 条虚构记录,在阈值 0.8 时得到 3 条待人工复核与 2 条建议抽查,下载报告后可以逐条交接。

作者:JevLog 编辑部 · 2026-10-02 更新。这里只演练本地队列规则,不调用 Jev,不校准模型概率,也不把分数称作准确率。

打开人工复核队列生成器 · 下载输入 review-queue-demo.csv · 下载预期报告 JSON · 下载预期待复核队列 CSV

低信号、缺字段和异常结果进入人工复核队列。AI 概念插画。

工具接受稳定 ID、建议标签与已归一化到 0–1 的数值。样例列名是 id,text,label,confidence,source;confidence 是教学字段,不保证对应某个 Jev 接口的原始返回字段。真实接口要先核对分数定义并通过适配层整理,不要把 85 自动当成 0.85,也不要把任意相似度称作正确概率。

选择 ID 列 id、标签列 label、分数列 confidence,保留练习阈值 0.8,然后运行。每个文件最多 5 MB;浏览器本机处理文件,不需要登录。

ID 建议标签 分数 去向 原因
1 billing 0.91 建议抽查 达到练习阈值
2 technical 0.60 人工复核 低于练习阈值
3 other 空 人工复核 分数缺失
4 billing 0.85 建议抽查 达到练习阈值
5 空 0.96 人工复核 建议标签缺失

摘要应为 记录数 5、待人工复核 3、可供抽查 2、缺失或非法分数 1、建议标签缺失 1。两种去向互斥,3 + 2 = 5;问题原因计数不一定互斥,一条记录可能同时缺标签和缺分。

分数低于阈值才因低分进入复核,等于阈值会留在建议抽查。把阈值改成 0.6 后,ID 2 不再因低分入队,预期是复核 2、抽查 3;ID 3 和 ID 5 仍然复核。缺标签、空分数、非数字、越出 0–1 的值都不能靠降低阈值通过。

0.8 和 0.6 只是练习参数。业务阈值要在经过人工确认的样本上选择,同时查看漏过的错误、人工成本与不同类别,不以复核比例越低越好作为目标。

  • review-report.csv 或 review-report.json:完整结果,含五条记录的去向、原因及可用原文。JSON 还包含待复核队列。
  • review-queue.csv:只含待复核的 ID 2、3、5,保留全部输入列,包括 source,末尾增加 jevlog_review_reason。若输入已有这个列名,工具使用带 _2 后缀的不冲突列名。

页面表格会展示 text、feedback 或 message 中识别到的原文列。若原文使用其他列名,队列下载仍保留它,但页面原文栏可能为空。下载的 CSV 为表格查看而防护类似公式的单元格;需要核对原值时保留 JSON 和原文件。

在你的交接表中另记 id, suggested_label, final_label, review_reason, reviewer, reviewed_at, rule_version,保留初始建议和原文。确认、改标、暂缓都要能说明原因。当前工具生成队列,没有在线审核账户、多人任务分配或自动保存人工修改;这些结论需要你在自己的表格或系统里保存。

将人工结论按稳定 ID 对回输入,核对总数与没有处理完的记录。若下一版规则改变,用 分类结果对比器 查看哪些记录变了,并保存人工结论版本。

如果有请求失败,但标签和分数仍存在呢?

Section titled “如果有请求失败,但标签和分数仍存在呢?”

这个工具只按标签、分数和阈值分流,不读取 status 或 error 自动识别技术失败。适配真实结果时,应单独保留失败队列,防止失败记录沿用旧标签或旧分数后混入抽查队列。

重复 ID、缺列或列错位怎么处理?

Section titled “重复 ID、缺列或列错位怎么处理?”

空 ID、重复 ID、列数异常会阻止生成可靠队列;ID、标签和分数必须选择不同的存在列。先用 CSV 预检器 修复结构问题;非法分数与缺标签则保留在结果中等待复核。

不在。刷新前下载完整报告和待复核队列;之后重新选择输入与阈值即可重跑。无需登录。建议抽查也不是批准执行,页面不会回复客户、退款或调用外部系统。

CSV 预检教程 → 工单分类练习 → 当前复核练习 → 分类标签变更对比。

样例与预期报告来自本站当前本地规则。它们能验证队列生成过程,不能证明 Jev 的线上效果、分数校准程度或业务自动化收益。