当前位置: 首页 > news >正文

数智先锋 | 多场景数据治理案例,释放数据要素生产力

数据作为第五大生产要素,成为释放新质生产力的关键基础。

当前各个行业数字化建设如火如荼,全力挖掘数据价值以驱动行业高质量应用发展。数据治理成为数据要素价值发挥的重要基础和前提。

数据治理不单是技术问题,不是依赖工具就能解决的,重难点在于结合实际业务需求进行数据顶层设计、数据治理体系建设、标准管控实施、服务共享机制等。

从企业、园区、政务领域的不同需求场景,我们为您介绍基于smardaten平台的典型数据治理实践案例。

01 企业数据治理

数据资源是企业数字化转型的核心要素和基础资源,当前数据资产管理中依然存在三大难题:找数据难、治数据难、用数据难。企业进行数据资产管理是数字化建设的长期任务。

案例1煤矿集团数据治理

某煤矿集团目前在煤炭板块建立集团数据标准化体系,包括一套数据标准和数据管理、应用、运行3大保障体系,但聚焦到煤矿板块尚无矿井侧数据采、治、管等能力。作为核心领域之一,解决数据标准问题,才能进一步扩展创新数字化应用,因此需要建设基于数据标准化体系的数据整合治理平台。

主要思路就是以集团数据标准化体系为基础,整合矿井侧的煤炭产业、安全管理、生产辅助、生产调度、生产技术、销售管理和其他业务相关的数据资源,构建矿井侧数据采集、治理、共享和应用等能力,适配矿井侧业务特点及数据特性,从而达到数据标准化体系落地的数据整合治理研究的目标。

主体建设内容如下:

1.数据标准内置转换:按照标准管理体系梳理各类数据标准,并进行全面深入的可视化展示,提供数据标准概览、标准录入、标准审批、标准质量管理能力。

2.数据采集:提供对业务数据采集任务的分类展示功能,通过数据连接器完成业务数据、设备数据等实时/准实时采集,通过设定的数据传输方式、存储地址、数据字段处理等,根据采集频次自动采集。

3.数据治理:具备数据源管理、数据质量、数据清洗、数据字典、数据编目等功能,能够有效与原有业务系统或标准库进行对接。

4.数据调度:通过数据统一监控调度,管理数据流与任务流执行情况。调度中心负责调度上传数据任务,支持任务定制、上线、调度频率等相关配置,及调度记录、执行日志的查看能力。

5.数据应用:基于标准化数据治理结果,提供数据多维分析和应用模块构建,结合业务实现融合应用,支持各类图表可视化分析与展示大屏,全局性展现数据管理与应用成效。

02 大型园区数据资产管理

数字化园区管理场景多、且需求碎片化,对业务系统定制化更高。经过长期分散化系统建设和数据积累,大多面临数据资源分散、数据权属不清晰、数据难收/未收等问题,对园区内的企业、人员、设备等数据的归集整理和使用的需求更迫切。

案例2 西部某大型开发区数据中台

西部某大型开发区当前正在推动新一批数字转型实施,培育一批数字标杆场景应用,打造一个数字产业聚集区,旨在通过数据要素与生产要素的结合,推动产业数字化、数字产业化。

本次核心是建设覆盖园区全域数字化场景的公共服务平台。数据中台作为其中重要组成部分,将为园区业务构建、经营管理、企业服务、生产发展等提供底层数据服务能力。

数据中台提供数据接入、清洗、治理、分析、开放等一站式底层能力,还支持多租户、日志审计、加解密等数据安全管控,同样能够涵盖全过程数据治理能力,具备数据血缘分析和质量报告自动生成等亮点功能,并打造统一开放的API工厂实现数据共享,为上层应用的多元化使用奠定基础。

主体建设内容如下:

1.数据专题库:汇聚覆盖综合安全、生产安全、物联感知、人力等相关数据作为数据源。按照不同业务属性将数据分类形成产业主题库、政府主题库、企业主题库,并抽象其中的关键指标信息集聚作为指标专题库。

2.数据仓库:建设源数据层(ODS)、标准数据层(STD)、数据模型层(DWD)、数据集市层(DM)四层数据仓库,层层递进,完成数据的拉宽、升维处理,为主题库的建设提供逻辑框架。

3.共享交换:依据平台共享交换能力,对外开放数据服务接口,便于各级委办局查询相关信息,涵盖生产安全、数字综治及相关分析指标等。

4.指标建设:最后按照业务需要建设业务要素和业务场景专题库,对数据进行进一步深度计算、分析、融合,抽象出可以反映区域产业发展和政府公共服务类数据指标,为相关部门领导制定安全发展政策提供数据支撑。

03 政务数据治理

政务领域对数据治理和共享使用有着更为严格的要求,国家和各地区都有相应的政务大数据治理体系顶层设计及治理实施规范,实施政务数据的有效治理是推进“数字政府治理”的基础,是发挥政务数据要素价值的必要条件。

案例3城市生命线数据治理

正如其名,城市生命线包括燃气、桥梁、排水(排水防涝、污水)、供水、道路、 综合管廊、第三方施工等影响城市建设和发展的关键基础设施。

某市政园林局为提升城市基础设施安全运行智慧监管能力,规划构建城市生命线数据能力中心成为必要基础和前提,是数字化层面上的基础设施。

本次目标是以构建城市生命线数据库为核心,汇聚相关权属单位数据,依托数据库开展数据治理与分析,为基础设施运行监管提供更有效的支撑。

主体建设内容如下:

1.数据库设计:从数据字典设计、汇聚整合、清洗转换、数据治理的角度,设定数据库设计原则,整体上分为:归集库、主题库、专题库。

2.数据汇集:建立数据采集规范,建立数据模型编码标准完成对数据的分域分类管理,汇聚多源数据,满足按需接入、分类传输、更新同步、传输安全等要求。

3.数据加工转换:为保障进入归集库的数据能满足主题库和专题库的使用需求,对数据开展标准化分析加工工作,将数据转换成标准结构,提升数据质量标准。

4.数据治理:对汇集的数据进行质量评估、规范化处理以及数据全生命周期管理,例如实现对图片等形式数据进行结构化处理,对不同设施的坐标系进行转换,多档案ID关联、完整性校验、数据命名规范等。

5.数据发布:对治理后的各类生命线数据面向省级、市级相关监管系统进行发布共享。


数据治理是一套涉及数据标准、质量、分类、共享、安全等多方面的数据管理方法,在不同场景下数据管理需求不尽相同,但数据治理核心逻辑是一致的。

数睿数据打造一体化的数据治理解决方案,覆盖数据全生命周期的一站式数据管理能力。以数据规划为基础,为数据治理提供明确的战略方向和实施路径,提供统一的数据标准、流程和策略,促进数据资产的整合、共享和利用。确保数据治理项目能够满足组织的业务需求和目标。

数睿数据助力推动“数据要素X”行动,提升行业数据资源开发利用能力,数据驱动行业数字化高质量发展。

相关文章:

数智先锋 | 多场景数据治理案例,释放数据要素生产力

数据作为第五大生产要素,成为释放新质生产力的关键基础。 当前各个行业数字化建设如火如荼,全力挖掘数据价值以驱动行业高质量应用发展。数据治理成为数据要素价值发挥的重要基础和前提。 数据治理不单是技术问题,不是依赖工具就能解决的&a…...

UE5 audio capture 回声问题 ||在安卓上有爆鸣声

参考视频 0.基本步骤 【UE4_蓝图】录制麦克风声音/系统声音并输出保存WAV文件_ue4录音-CSDN博客 1.步骤 1.创建Sound Submix A 2. 右键新建Sound Submix B 3.把B的两个参数调为-96 4.audio capture的Base Submix,把前面提到的A赋值进去 5.开始录制输出和完成录制…...

第 10 场蓝桥杯小白入门赛题解

1.五一礼物【算法赛】 - 蓝桥云课 (lanqiao.cn) #include <iostream> using namespace std; int main() {cout<<"51"<<endl;return 0; }2.合成贤者之石【算法赛】 - 蓝桥云课 (lanqiao.cn) 假设黄水晶的个数是 x x x,那蓝水晶个数肯定是 x − 1 …...

抖音视频评论区用户采集 根据视频链接批量获取用户信息

要批量获取抖音视频评论区用户的信息&#xff0c;可以通过抖音开放平台的接口来实现。 首先&#xff0c;你需要在抖音开放平台注册开发者账号&#xff0c;并创建一个应用。然后&#xff0c;使用抖音开放平台提供的接口&#xff0c;可以根据视频链接获取视频的详细信息&#xf…...

C++ 多态(一)

一、多态定义 同一种操作作用于不同的对象时&#xff0c;可以产生不同的行为。在面向对象编程中&#xff0c;多态性是指通过继承和重写实现的&#xff0c;同一个方法在不同的子类中可以表现出不同的行为。多态性可以提高代码的灵活性和可扩展性&#xff0c;使得程序更易于维护…...

[Linux][网络][TCP][一][TCP基础][TCP报头]详细讲解

目录 1.TCP头部格式2.TCP协议的特点3.TCP如何封装与分用4.通过序列号和确认应答号提高可靠性1.32位序列号2.32位确认应答号3.保证可靠性4.为什么序列号和确认应答号是单独的字段 5.窗口大小1.TCP的发送和接收缓冲区2.窗口大小 6.连接管理机制 1.TCP头部格式 TCP全称为"传输…...

java-函数式编程-函数对象

定义 什么是合格的函数&#xff1f;无论多少次执行函数&#xff0c;只要输入一样&#xff0c;输出就不会改变 对象方法的简写 其实在类中&#xff0c;我们很多参数中都有一个this&#xff0c;被隐藏传入了 函数也可以作为对象传递&#xff0c;lambda就是很好的例子 函数式接口中…...

致远oa实时获取第三方自定义组件实现

背景 最近的一个需求不好处理&#xff0c;甲方没有准确的数据支撑&#xff0c;各种问题踢皮球&#xff0c;所以有时间实现一个实时获取数据的组件 需求 为了实现方便&#xff0c;封装了一个第三方数据实时展示的组件 只要修改配置&#xff0c;就可以实现字段的删除增加&…...

【Linux-点灯烧录-SD卡/USB烧写】

目录 1. 烧写方式2. 烧写之代码编译2.1 led.s->led.o2.2 led.o->led.elf2.3 led.elf->led.bin2.4 反汇编&#xff1a;led.elf->led.dis 3. 烧写之烧录到SD卡上&#xff1a;3.1 开启烧录软件权限&#xff1a;3.2 确定SD卡的格式&#xff1a;FAT323.3 烧录到SD卡上3.…...

PostgreSQL自带的命令行工具06- pg_isready

PostgreSQL自带的命令行工具06- pg_isready 基础信息 OS版本&#xff1a;Red Hat Enterprise Linux Server release 7.9 (Maipo) DB版本&#xff1a;16.2 pg软件目录&#xff1a;/home/pg16/soft pg数据目录&#xff1a;/home/pg16/data 端口&#xff1a;5777pg_isready 是 Po…...

【请投票】嘉立创EDA中LED发光二极管是否应有统一的引脚定义?

LED发光二极管的引脚定义应该是唯一的吗&#xff1f; 从下面原理图可以看到&#xff0c;器件型号仅尾缀不同,R代表RED红色发光二极管&#xff0c;W代表WHITE指白色发光二极管&#xff0c;是同一家制造商KENTO&#xff0c; 左侧红色发光二极管的1脚是阴极K&#xff0c;2脚是阳极…...

LT6911UXB HDMI2.0 至四端口 MIPI DSI/CSI,带音频 龙迅方案

1. 描述LT6911UXB 是一款高性能 HDMI2.0 至 MIPI DSI/CSI 转换器&#xff0c;适用于 VR、智能手机和显示应用。HDMI2.0 输入支持高达 6Gbps 的数据速率&#xff0c;可为4k60Hz视频提供足够的带宽。此外&#xff0c;数据解密还支持 HDCP2.2。对于 MIPI DSI / CSI 输出&#xff0…...

网络培训议题@2

目录 1. 如何通过IP和掩码确定网关&#xff1a;2. 网络路由的意义和配置方法&#xff1a;3. 网络Bond模式的区别和配置场景&#xff1a;4. 堆叠、VLAN、Trunk、聚合的意义&#xff1a;5. 虚拟机环境下VIP配置和常见问题&#xff1a;6. VXLAN拓展&#xff1a; 1. 如何通过IP和掩…...

linux文本三剑客之sed

目录 1、sed特点 1&#xff09;sed命令格式 2&#xff09;sed命令核心功能"增删改查" 2、sed命令执行过程 3、sed核心应用 1&#xff09;sed-查找p 2&#xff09;sed-删除d 3&#xff09;sed-增加cai 4) sed-替换s 1、sed特点 sed stream editor 流编辑器…...

nginx封禁恶意IP

网络攻击时有发生 TCP洪水攻击、注入攻击、DOS等比较难防的有DDOS等 为了数据安全&#xff0c;防止对手爬虫恶意爬取&#xff0c;封禁IP 一般封禁ip linux server层面封IP&#xff1a;iptablesnginx层面封IP&#xff0c;方式多种&#xff08;但req还是会打进来&#xff0c;让…...

「PHP系列」PHP MySQL 简介及运用

文章目录 一、PHP MySQL 简介二、MySQL安装三、相关链接 一、PHP MySQL 简介 PHP MySQL是一个结合了PHP和MySQL的组合&#xff0c;用于在Web应用程序中处理数据库操作。 MySQL&#xff1a; 定义&#xff1a;MySQL是一个流行的开源关系型数据库管理系统&#xff08;RDBMS&…...

深度学习论文: XFeat: Accelerated Features for Lightweight Image Matching

深度学习论文: XFeat: Accelerated Features for Lightweight Image Matching XFeat: Accelerated Features for Lightweight Image Matching PDF: https://arxiv.org/pdf/2404.19174 PyTorch代码: https://github.com/shanglianlm0525/CvPytorch PyTorch代码: https://github.…...

C++之Eigen库基本使用

目录 1、矩阵的构造和初始化操作 2、矩阵的算术运算 3、矩阵的分解和求解 4、矩阵的变换 5、矩阵的访问和修改 6、矩阵遍历 7、线性方程组求解 8、其他操作 Eigen库是一个高级的C库&#xff0c;用于线性代数&#xff0c;矩阵和向量运算&#xff0c;数值分析和相关的数学…...

2024年 Java 面试八股文——SpringBoot篇

目录 1. 什么是 Spring Boot&#xff1f; 2. 为什么要用SpringBoot 3. SpringBoot与SpringCloud 区别 4. Spring Boot 有哪些优点&#xff1f; 5. Spring Boot 的核心注解是哪个&#xff1f;它主要由哪几个注解组成的&#xff1f; 6. Spring Boot 支持哪些日志框架&#…...

C/C++的指针、万能指针、常量指针和指针常量

C/C的指针 1、 指针的概念&#xff1a; 指针是一个变量&#xff0c;它存储的是另一个变量的内存地址&#xff0c;而不是变量的值。 指针变量的声明&#xff1a;在C/C等语言中&#xff0c;我们通过使用星号*来声明一个指针变量。例如&#xff0c;int *ptr; 这行代码声明了一个…...

地震勘探——干扰波识别、井中地震时距曲线特点

目录 干扰波识别反射波地震勘探的干扰波 井中地震时距曲线特点 干扰波识别 有效波&#xff1a;可以用来解决所提出的地质任务的波&#xff1b;干扰波&#xff1a;所有妨碍辨认、追踪有效波的其他波。 地震勘探中&#xff0c;有效波和干扰波是相对的。例如&#xff0c;在反射波…...

定时器任务——若依源码分析

分析util包下面的工具类schedule utils&#xff1a; ScheduleUtils 是若依中用于与 Quartz 框架交互的工具类&#xff0c;封装了定时任务的 创建、更新、暂停、删除等核心逻辑。 createScheduleJob createScheduleJob 用于将任务注册到 Quartz&#xff0c;先构建任务的 JobD…...

高防服务器能够抵御哪些网络攻击呢?

高防服务器作为一种有着高度防御能力的服务器&#xff0c;可以帮助网站应对分布式拒绝服务攻击&#xff0c;有效识别和清理一些恶意的网络流量&#xff0c;为用户提供安全且稳定的网络环境&#xff0c;那么&#xff0c;高防服务器一般都可以抵御哪些网络攻击呢&#xff1f;下面…...

【开发技术】.Net使用FFmpeg视频特定帧上绘制内容

目录 一、目的 二、解决方案 2.1 什么是FFmpeg 2.2 FFmpeg主要功能 2.3 使用Xabe.FFmpeg调用FFmpeg功能 2.4 使用 FFmpeg 的 drawbox 滤镜来绘制 ROI 三、总结 一、目的 当前市场上有很多目标检测智能识别的相关算法&#xff0c;当前调用一个医疗行业的AI识别算法后返回…...

CVE-2020-17519源码分析与漏洞复现(Flink 任意文件读取)

漏洞概览 漏洞名称&#xff1a;Apache Flink REST API 任意文件读取漏洞CVE编号&#xff1a;CVE-2020-17519CVSS评分&#xff1a;7.5影响版本&#xff1a;Apache Flink 1.11.0、1.11.1、1.11.2修复版本&#xff1a;≥ 1.11.3 或 ≥ 1.12.0漏洞类型&#xff1a;路径遍历&#x…...

算法:模拟

1.替换所有的问号 1576. 替换所有的问号 - 力扣&#xff08;LeetCode&#xff09; ​遍历字符串​&#xff1a;通过外层循环逐一检查每个字符。​遇到 ? 时处理​&#xff1a; 内层循环遍历小写字母&#xff08;a 到 z&#xff09;。对每个字母检查是否满足&#xff1a; ​与…...

水泥厂自动化升级利器:Devicenet转Modbus rtu协议转换网关

在水泥厂的生产流程中&#xff0c;工业自动化网关起着至关重要的作用&#xff0c;尤其是JH-DVN-RTU疆鸿智能Devicenet转Modbus rtu协议转换网关&#xff0c;为水泥厂实现高效生产与精准控制提供了有力支持。 水泥厂设备众多&#xff0c;其中不少设备采用Devicenet协议。Devicen…...

es6+和css3新增的特性有哪些

一&#xff1a;ECMAScript 新特性&#xff08;ES6&#xff09; ES6 (2015) - 革命性更新 1&#xff0c;记住的方法&#xff0c;从一个方法里面用到了哪些技术 1&#xff0c;let /const块级作用域声明2&#xff0c;**默认参数**&#xff1a;函数参数可以设置默认值。3&#x…...

轻量级Docker管理工具Docker Switchboard

简介 什么是 Docker Switchboard &#xff1f; Docker Switchboard 是一个轻量级的 Web 应用程序&#xff0c;用于管理 Docker 容器。它提供了一个干净、用户友好的界面来启动、停止和监控主机上运行的容器&#xff0c;使其成为本地开发、家庭实验室或小型服务器设置的理想选择…...

13.10 LangGraph多轮对话系统实战:Ollama私有部署+情感识别优化全解析

LangGraph多轮对话系统实战:Ollama私有部署+情感识别优化全解析 LanguageMentor 对话式训练系统架构与实现 关键词:多轮对话系统设计、场景化提示工程、情感识别优化、LangGraph 状态管理、Ollama 私有化部署 1. 对话训练系统技术架构 采用四层架构实现高扩展性的对话训练…...