2023年是数字化改革“两年大变样”的关键之年,温州水利系统对照落实省市数字化改革部署要求,聚焦改革突破,突出实战实效,强化资源利用,纵深推进水利数字化改革,努力打造更多标志性改革成果。11月10日起,“温州水利”公众号推出 “水利数字化改革”专题,展现水利数字化...
2023年是数字化改革“两年大变样”的关键之年,温州水利系统对照落实省市数字化改革部署要求,聚焦改革突破,突出实战实效,强化资源利用,纵深推进水利数字化改革,努力打造更多标志性改革成果。11月10日起,“温州水利”公众号推出 “水利数字化改革”专题,展现水利数字化改革的“硬核”成果,努力在数字化改革全景图中展示更多水利风采和担当。今天,为大家介绍 温州水利数据治理七步法。
数据治理七步法
让水利数据“奔流不息”
1.
河流是人类的母亲,文明的摇篮,其核心是水,命脉在于流动。通过流动,实现自我净化、传输物质、转化能量、改造自然。数据如水,将涓涓细流汇聚成滔滔江水,以数据流为载体,打通业务流、决策流、执行流,可激发数据生产要素对经济社会的放大、叠加、倍增作用。
2021年以来,温州市水利局围绕水利部智慧水利总体部署和全省数字化改革要求,针对目前水利数据存在的“统而不通、拥而难用、汇而不慧”难题,实施数据治理七步法,疏通数据汇聚之河,布设数据治理之闸,建设一体化管理之湖,配置数据服务之泵,构建一套让数据“流动”起来的机制和框架,形成具备持续性更新能力的数据支撑体系,为数字孪生流域建设提供高保真的数据支撑。
数据治理七步法
第一步 数据编目
以省级水利基础数据资源目录为基础(《浙江省水利厅基础数据资源目录清单》),编制温州地方水利数据资源目录,实现与省级水利基础数据资源目录实时同步。县(市、区)从数据仓共享基础数据资源时,经编目模块实现自动转化映射为本地编目,上传时自动转化为省厅编目规则。对于省厅的基础数据资源目录变化时,对照映射机制的不同,自动推送地市更新编目,实现全省编目及时同步和一致化管理。
第二步 数据汇聚
通过物联采集、省级回流、部门共享、市县汇集等多种方式,汇聚了海量数据资源,包含基础数据158类198万条,实时监测数据37类6.9亿条,各类业务数据115万条,河湖、卫星影像等20类空间数据510G,从发改、资规、执法、应急、气象等市级部门共享涉水数据13万条。实时数据以每日80万条左右新增。
第三步 数据规则
基于《浙江省水管理平台统一数据建设指南》、《水利工程基础数据字典》、《浙水安澜统一数据建设指南》、《全省水文数据治理规则V1.0》对于基础数据、实时数据的标准规范,结合温州市业务应用实际,制定了134项数据检查规则,从非空检核、非法值检核、数据格式检核、业务逻辑检核、更新频次检核等角度,对每日增量数据进行定期检查,实现对数据有效性、数据越界、数据缺失、数据跳变等状态进行清晰和处理,保障了数据的准确性、实时性。
第四步 数据清洗
对各类数据资源按数据表、数据行、数据字段配置责任人关联和治理规则。利用数据规则对数据“汇-通-管-用”等关键环节进行定期的规范的检查,对发现的问题,系统自动形成工单,进行预警提醒、运维处理、变更审核、应用分发,完成数据治理自动化流程,保障应用数据清洁可用。运维角色人员可以进行处理任务的接收、数据处理、日志填报、任务提交,数据审核人员可以对发生变更的数据进行审核,完成问题数据的修复。对省级回流数据开发自动修复功能,保证数据省级源头回流的畅通性和数据一致性。
第五步 数据服务
依托浙江省一体化数字资源系统,以数据访问API、共享数据库、数据文件等方式,形成对外数据服务的统一出口。资源需求方在数据管理平台中进行资源查询、申请,填写资源申请单(申请资源项、申请原因、相关材料、使用频率等),提交到防御中心,审核通过后资源需求方即可使用资源,对申请的资源及审核情况做到实时掌控。同时,提供平台内查看、API接口、库表共享等多种方式,进行数据的分发,为气象、地灾、城管、市政等等部门提供数据服务141项。同时通过对数据资源共享服务的二次开发,实现了数据的管控与限流。
第六步 数据安全
构建数据仓“防水坝”,对人员身份、工程特定指标、内控资金合同等关键敏感数据资产,建立了入仓加密-访问脱敏-操作审计-授权控制等机制,提供全面的数据防护能力;针对日常数据变更,实现异常行为检测、字段级变更比对、逐级审核、版本回溯,确保入仓数据操作安全合规。
第七步 数据制度
制定《温州市水利数据管理暂行办法》,按照“统筹规划、分级建设、统一管理、按职维护、共建共享、安全可信”的原则,规范全市水利数据生产、更新、汇集、共享、应用等各个环节的工作要求,明确数据各级生产、管理、使用单位工作职责,协同推进全市水利数据治理工作,保障各类数据的可靠性、准确性和完整性。
特色亮点
一、数据质量全流程管控
对每类数据资源,梳理了从产生、接收、处理、存储、分发、应用的全流程链路,监测每个资源的各个节点环节运行状态,构建数据全面归集、质量提升和融合集成的精准化“数治”路径,打造数据分析与决策和多源数据创新的一体化数字平台,支撑省市县三级数据治理,实现数据治理能力的高质量提升。
二、数据管理责任落实落细
确立条目级的数据责任人,通过点对点反映相关数据问题,解决数据缺乏更新、数据无法准确映射现实等问题。构建一套问题发现-数据处理-超时预警-复盘考核的工单化流程,数据责任人员按照工单可以进行查询问题-解决问题-反馈问题-问题回溯,形成从数据维护、数据审核、预警考核的责任闭环体系,保障数据仓数据质量稳步提升。
三、组件式开发灵活可复用
针对通用组件薄弱等问题,开发数字能力的组件,实现跨场景应用自由调用、功能化需求按需定义、组件可迭代升级、逻辑可血缘追踪,为场景开发提供菜单式、自助式、装配式功能支持,减少重复建设和重复投入。
来源:防御中心
往期推荐
☞ 水利数字化改革丨苍南:全市首个“水域监管一件事”应用 权利维护河湖水域生态健康
☞ 水利数字化改革丨永嘉:"楠溪江流域洪水综合预报调度"应用 提升防范化解流域洪水灾害风险能力
☞ 水利数字化改革丨乐清:“水土保持极简审批”应用 减负增效助力“两个健康”先行区建设
☞ 水利数字化改革丨水文中心:厚植优势 久久为功 稳步推进水文数字化建设
责任编辑: