数据治理 Skill技能列表

⚡

数据标准化规范Skill data-standardization

4.5

该技能用于把杂乱的中文企业结构化表格数据(CSV/Excel)标准化为可分析形态,按 L0 编码字符 → L1 结构(列名)→ L2 类型格式 → L3 单位 → L4 枚举值域(字典)→ L5 标识(PII)六层顺序锁执行确定性规则:全角半角归一、BOM/零宽字符清理、表头别名与单位后缀抽取、日期统一为 ISO 8601、数值千分位与括号负数处理、金额万元/元与计量单位换算、行政区划/性别/币种/学历等 D-01~D-11 离线字典映射,以及手机号/身份证/银行卡/统一社会信用代码的识别校验与出口脱敏;先画像后动手,全程幂等可复现,逐条输出影响行数、前后示例、未匹配清单证据三件套,超界不静默、模糊映射须人工确认。关键词:数据标准化、数据清洗、数据治理、表格数据清洗、CSV 清洗、Excel 清洗、全角半角转换、编码归一(GBK 转 UTF-8)、日期格式统一、ISO 8601、金额单位换算、万元转元、千分位处理、枚举值映射、字典匹配、行政区划标准化、城市名称统一、性别布尔标准化、PII 脱敏、手机号校验、身份证校验、泛微式表格规范化、幂等规则、六层规则、证据三件套、数据质量。