限制项 | 说明 |
入口 | Catalog 表详情页 质量 Tab 中的「数据剖析」入口 |
漂移产出条件 | 仅在配置了基线表时产生漂移指标,否则漂移指标为空 |
推理剖析必需列 | 至少配置时间戳、预测列与模型 ID 列;公平性指标需额外指定标签列、对照组、保护组 |
仪表盘删除 | 当前删除仪表盘会一并删除中间表,后续会优化为只删配置保留中间表 |
通知 | 剖析任务的告警通知本期不支持 |
类型 | 适用场景 | 必填配置 |
快照(Snapshot) | 静态表的整体分布与质量摘要 | 计算资源、资源模式、资源配置 |
时序(TimeSeries) | 按时间维度持续观察分布趋势 | 计算资源、资源模式、资源配置、时间戳、指标粒度 |
推理(Inference) | 监控 ML 模型推理日志的特征漂移与模型质量 | 计算资源、资源模式、资源配置、时间戳、指标粒度、标签列、预测列、模型 ID |
参数 | 是否必填 | 说明 |
问题类型 | 是 | 分类 / 回归 |
时间戳列 | 是 | 推理请求的时间戳字段 |
预测列(prediction_column) | 是 | 模型输出的预测值字段 |
模型 ID 列(model_id_column) | 是 | 模型标识字段,支持多版本对比 |
标签列(label_column) | 是 | 配置后可计算准确率、精确率等模型质量指标 |
操作 | 说明 |
查看仪表盘 | 跳转到仪表盘模块,定位到该表的剖析仪表盘 |
刷新仪表盘 | 重新执行仪表盘上的查询,从中间表拉取最新数据;不会重新计算指标,也不会改变图表结构 |
删除仪表盘 | 移除当前仪表盘的所有图表与剖析数据;点击后弹出二次确认 |
编辑配置信息 | 右侧抽屉打开配置抽屉,所有字段均可再编辑,保存后按新配置更新仪表盘 |
运行记录 | 弹窗展示剖析的执行历史(执行时间、触发方式、策略、状态、耗时),可点击查看日志 |
参数 | 说明 | 是否必填 | 默认值 | 取值范围 |
剖析类型 | 决定指标集合与必填项 | 是 | 快照 | 快照 / 时序 / 推理 |
计算资源 | 执行剖析作业的计算资源 | 是 | - | Workspace 可用计算资源 |
调度方式 | 控制剖析的触发方式 | 是 | 手动 | 手动 / 周期调度(高级选项内) |
基线表 | 用于漂移对比的参照表 | 否 | - | 同 Workspace 中的表 |
参数 | 时序 | 推理 | 说明 |
时间戳列 | 是 | 是 | 用于按时间分桶聚合 |
指标粒度 | 是 | 是 | 小时 / 天 / 周 / 月 |
标签列 | - | 是 | 推理类型可选,配置后计算模型质量指标 |
预测列 | - | 是 | 推理类型必填 |
模型 ID 列 | - | 是 | 推理类型必填 |
指标 | 英文名 | 说明 |
KS 检验 | Kolmogorov-Smirnov Test | 检验两个分布是否来自同一总体 |
PSI | Population Stability Index | 衡量分布偏移程度,业界最常用 |
Wasserstein 距离 | Wasserstein Distance | 两个分布之间的「搬土」距离 |
指标 | 英文名 | 说明 |
卡方检验 | Chi-Square Test | 检验分类分布是否显著变化 |
JS 散度 | Jensen-Shannon Divergence | 衡量两个分布的对称距离 |
TV 距离 | TV Distance | 衡量两个概率分布差异的核心指标 |
切比雪夫距离 | L∞ Distance | 衡量两个分布在单一维度上的最大差异 |
predict 与 label 列后,平台额外产出以下模型质量指标:模型类型 | 指标 | 说明 |
分类 | 准确率(accuracy_score) | 正确预测的比例 |
分类 | 混淆矩阵 | 仅在仪表盘展示,不在规则模板中固化 |
分类 | 精确率(precision) | TP / (TP + FP) |
分类 | 召回率(recall) | TP / (TP + FN) |
分类 | F1 分数(f1_score) | 精确率与召回率的调和平均 |
回归 | MSE / RMSE / MAE / MAPE | 误差类指标,越低越好 |
回归 | 决定系数 R² | 介于 0 和 1 之间,越接近 1 拟合越好 |
分类(公平性) | 预测奇偶性、预测平等性、机会均等性、统计奇偶性 | 需额外指定保护组、对照组 |
文档反馈