PRODUCTION STATUS / RUNNING DATA PIPELINE / v1.0 CN · ZAOZHUANG 周一至周六 09:00 - 18:00

质量管理 · 2026-09-30 · 文途数据·质检中心

三级质检 + 争议仲裁:我们把 99% 准确率拆成了哪些动作

准确率不是验收时抽检出来的,而是由流程结构决定的。本文公开一套可复用的标注质检链路。

质检交付流程

常见做法是交付前按 5% 抽检,不合格就返工。问题是抽检发现的是结果,不是原因;同一类错误会在下一批重复出现。我们把准确性事故往前推,做成了三级结构。

第一级:初标自检

关键词级别的必填校验、几何合法性校验随身携带,标注员提交时即时拦截明显错误,避免把低级错误带进质检环节。

第二级:交叉抽检

按人、按类别、按难度分层抽样,而不是简单随机抽样。对历史缺陷率高的类别与新上线标注员提高抽样权重,让抽检资源集中在风险点。

第三级:争议仲裁

抽检分歧进入仲裁队列,由规范负责人给出裁定,并把裁定回写进边界样例库,同时更新规范文档。这一步让每次分歧都变成后续批次的确定性。

指标怎么算

我们同时给出逐类准确率、争议率、返工率与标注者一致性,而不是只报一个总数。客户可以据此判断某个长尾类别是否需要补数据,而不是被一个漂亮的平均数掩盖问题。