数据治理
清洗结果另存,原始报文保持只读
接入、质量、标准和指标是一条演示流水线。无法可靠修复的读数进入隔离区,由人确认,而不是被新值覆盖。
01
多源接入
闸机、视频、气象站、票务、POS
02
原始区
只读留存报文、来源、批次
03
质量检测
范围、重复、延迟、突变
04
标准层
字段映射与单位统一
05
主题汇总
客流、收入、安全、服务
06
指标服务
口径、权限、时间范围
质量评分
- 完整性96
充电桩两个点位缺失
- 准确性93
码头雨量已与人工记录核对
- 一致性91
闸机与视频差 3.4%,在允许带内
- 及时性84
南门闸机延迟 4 分钟
- 唯一性99
当日重复事件 2 条已剔除
指标血缘
- 1收入事实 DWD
- 2客流事实 DWD
- 3收入主题 DWS
- 4指标 M-客单价-v3
口径版本 M-客单价-v3。模型输出若换了分母,会被结果校验退回。
质量规则检查
对样例明细逐条运行 7 条质量规则(负数、重复、静默设备、跳变、对账等)。只读检查,不会改动任何记录。
隔离区
主峰噪声传感器
读数 1 分钟内从 48 dB 跳到 126 dB
标记异常,不计入环境指标
东侧充电桩 6 号
在线但连续 3 个周期无数据
隔离并派检修,不补造电量
采集批次
南门闸机
延迟入库B-1017-15 · 事件已到,处理状态为迟到,未覆盖 15:32 前的累计值。
票务订单
成功B-1017-12 · 增量同步 1,204 笔,按订单号去重。
财务日结
未到达B-1017-09 · T+1 日结尚未同步,利润与现金流保持不可用。