建议采用“6+4”质量口径:六个通用维度沿用国标 GB/T 36344-2018《信息技术 数据质量评价指标》——规范性、完整性、准确性、一致性、时效性、可访问性;再加四个 AI 专用指标——去重率、毒性率(有害内容占比)、隐私泄露率、标注一致性(Kappa 系数)。评测方法包括:规则校验(格式、完整性自动化检查);标注质量评估(一致性系数、抽样人工复核、黄金标准集准确率);多维度数据集评分卡。最关键的是“模型关联评测”——用数据集训练模型,以模型性能反向评测数据质量,“数据好不好,模型说了算”,这是数据质量评测的金标准。人工抽检合格率建议写入验收标准,低于 90% 的数据集不得进入训练。
收起>