数智先锋 | 多场景数据治理案例,释放数据要素生产力
数据作为第五大生产要素,成为释放新质生产力的关键基础。
当前各个行业数字化建设如火如荼,全力挖掘数据价值以驱动行业高质量应用发展。数据治理成为数据要素价值发挥的重要基础和前提。
数据治理不单是技术问题,不是依赖工具就能解决的,重难点在于结合实际业务需求进行数据顶层设计、数据治理体系建设、标准管控实施、服务共享机制等。
从企业、园区、政务领域的不同需求场景,我们为您介绍基于smardaten平台的典型数据治理实践案例。
01 企业数据治理
数据资源是企业数字化转型的核心要素和基础资源,当前数据资产管理中依然存在三大难题:找数据难、治数据难、用数据难。企业进行数据资产管理是数字化建设的长期任务。
案例1煤矿集团数据治理
某煤矿集团目前在煤炭板块建立集团数据标准化体系,包括一套数据标准和数据管理、应用、运行3大保障体系,但聚焦到煤矿板块尚无矿井侧数据采、治、管等能力。作为核心领域之一,解决数据标准问题,才能进一步扩展创新数字化应用,因此需要建设基于数据标准化体系的数据整合治理平台。
主要思路就是以集团数据标准化体系为基础,整合矿井侧的煤炭产业、安全管理、生产辅助、生产调度、生产技术、销售管理和其他业务相关的数据资源,构建矿井侧数据采集、治理、共享和应用等能力,适配矿井侧业务特点及数据特性,从而达到数据标准化体系落地的数据整合治理研究的目标。
主体建设内容如下:
1.数据标准内置转换:按照标准管理体系梳理各类数据标准,并进行全面深入的可视化展示,提供数据标准概览、标准录入、标准审批、标准质量管理能力。
2.数据采集:提供对业务数据采集任务的分类展示功能,通过数据连接器完成业务数据、设备数据等实时/准实时采集,通过设定的数据传输方式、存储地址、数据字段处理等,根据采集频次自动采集。
3.数据治理:具备数据源管理、数据质量、数据清洗、数据字典、数据编目等功能,能够有效与原有业务系统或标准库进行对接。
4.数据调度:通过数据统一监控调度,管理数据流与任务流执行情况。调度中心负责调度上传数据任务,支持任务定制、上线、调度频率等相关配置,及调度记录、执行日志的查看能力。
5.数据应用:基于标准化数据治理结果,提供数据多维分析和应用模块构建,结合业务实现融合应用,支持各类图表可视化分析与展示大屏,全局性展现数据管理与应用成效。
02 大型园区数据资产管理
数字化园区管理场景多、且需求碎片化,对业务系统定制化更高。经过长期分散化系统建设和数据积累,大多面临数据资源分散、数据权属不清晰、数据难收/未收等问题,对园区内的企业、人员、设备等数据的归集整理和使用的需求更迫切。
案例2 西部某大型开发区数据中台
西部某大型开发区当前正在推动新一批数字转型实施,培育一批数字标杆场景应用,打造一个数字产业聚集区,旨在通过数据要素与生产要素的结合,推动产业数字化、数字产业化。
本次核心是建设覆盖园区全域数字化场景的公共服务平台。数据中台作为其中重要组成部分,将为园区业务构建、经营管理、企业服务、生产发展等提供底层数据服务能力。
数据中台提供数据接入、清洗、治理、分析、开放等一站式底层能力,还支持多租户、日志审计、加解密等数据安全管控,同样能够涵盖全过程数据治理能力,具备数据血缘分析和质量报告自动生成等亮点功能,并打造统一开放的API工厂实现数据共享,为上层应用的多元化使用奠定基础。
主体建设内容如下:
1.数据专题库:汇聚覆盖综合安全、生产安全、物联感知、人力等相关数据作为数据源。按照不同业务属性将数据分类形成产业主题库、政府主题库、企业主题库,并抽象其中的关键指标信息集聚作为指标专题库。
2.数据仓库:建设源数据层(ODS)、标准数据层(STD)、数据模型层(DWD)、数据集市层(DM)四层数据仓库,层层递进,完成数据的拉宽、升维处理,为主题库的建设提供逻辑框架。
3.共享交换:依据平台共享交换能力,对外开放数据服务接口,便于各级委办局查询相关信息,涵盖生产安全、数字综治及相关分析指标等。
4.指标建设:最后按照业务需要建设业务要素和业务场景专题库,对数据进行进一步深度计算、分析、融合,抽象出可以反映区域产业发展和政府公共服务类数据指标,为相关部门领导制定安全发展政策提供数据支撑。
03 政务数据治理
政务领域对数据治理和共享使用有着更为严格的要求,国家和各地区都有相应的政务大数据治理体系顶层设计及治理实施规范,实施政务数据的有效治理是推进“数字政府治理”的基础,是发挥政务数据要素价值的必要条件。
案例3城市生命线数据治理
正如其名,城市生命线包括燃气、桥梁、排水(排水防涝、污水)、供水、道路、 综合管廊、第三方施工等影响城市建设和发展的关键基础设施。
某市政园林局为提升城市基础设施安全运行智慧监管能力,规划构建城市生命线数据能力中心成为必要基础和前提,是数字化层面上的基础设施。
本次目标是以构建城市生命线数据库为核心,汇聚相关权属单位数据,依托数据库开展数据治理与分析,为基础设施运行监管提供更有效的支撑。
主体建设内容如下:
1.数据库设计:从数据字典设计、汇聚整合、清洗转换、数据治理的角度,设定数据库设计原则,整体上分为:归集库、主题库、专题库。
2.数据汇集:建立数据采集规范,建立数据模型编码标准完成对数据的分域分类管理,汇聚多源数据,满足按需接入、分类传输、更新同步、传输安全等要求。
3.数据加工转换:为保障进入归集库的数据能满足主题库和专题库的使用需求,对数据开展标准化分析加工工作,将数据转换成标准结构,提升数据质量标准。
4.数据治理:对汇集的数据进行质量评估、规范化处理以及数据全生命周期管理,例如实现对图片等形式数据进行结构化处理,对不同设施的坐标系进行转换,多档案ID关联、完整性校验、数据命名规范等。
5.数据发布:对治理后的各类生命线数据面向省级、市级相关监管系统进行发布共享。
数据治理是一套涉及数据标准、质量、分类、共享、安全等多方面的数据管理方法,在不同场景下数据管理需求不尽相同,但数据治理核心逻辑是一致的。
数睿数据打造一体化的数据治理解决方案,覆盖数据全生命周期的一站式数据管理能力。以数据规划为基础,为数据治理提供明确的战略方向和实施路径,提供统一的数据标准、流程和策略,促进数据资产的整合、共享和利用。确保数据治理项目能够满足组织的业务需求和目标。
数睿数据助力推动“数据要素X”行动,提升行业数据资源开发利用能力,数据驱动行业数字化高质量发展。
相关文章:

数智先锋 | 多场景数据治理案例,释放数据要素生产力
数据作为第五大生产要素,成为释放新质生产力的关键基础。 当前各个行业数字化建设如火如荼,全力挖掘数据价值以驱动行业高质量应用发展。数据治理成为数据要素价值发挥的重要基础和前提。 数据治理不单是技术问题,不是依赖工具就能解决的&a…...

UE5 audio capture 回声问题 ||在安卓上有爆鸣声
参考视频 0.基本步骤 【UE4_蓝图】录制麦克风声音/系统声音并输出保存WAV文件_ue4录音-CSDN博客 1.步骤 1.创建Sound Submix A 2. 右键新建Sound Submix B 3.把B的两个参数调为-96 4.audio capture的Base Submix,把前面提到的A赋值进去 5.开始录制输出和完成录制…...
第 10 场蓝桥杯小白入门赛题解
1.五一礼物【算法赛】 - 蓝桥云课 (lanqiao.cn) #include <iostream> using namespace std; int main() {cout<<"51"<<endl;return 0; }2.合成贤者之石【算法赛】 - 蓝桥云课 (lanqiao.cn) 假设黄水晶的个数是 x x x,那蓝水晶个数肯定是 x − 1 …...
抖音视频评论区用户采集 根据视频链接批量获取用户信息
要批量获取抖音视频评论区用户的信息,可以通过抖音开放平台的接口来实现。 首先,你需要在抖音开放平台注册开发者账号,并创建一个应用。然后,使用抖音开放平台提供的接口,可以根据视频链接获取视频的详细信息…...

C++ 多态(一)
一、多态定义 同一种操作作用于不同的对象时,可以产生不同的行为。在面向对象编程中,多态性是指通过继承和重写实现的,同一个方法在不同的子类中可以表现出不同的行为。多态性可以提高代码的灵活性和可扩展性,使得程序更易于维护…...

[Linux][网络][TCP][一][TCP基础][TCP报头]详细讲解
目录 1.TCP头部格式2.TCP协议的特点3.TCP如何封装与分用4.通过序列号和确认应答号提高可靠性1.32位序列号2.32位确认应答号3.保证可靠性4.为什么序列号和确认应答号是单独的字段 5.窗口大小1.TCP的发送和接收缓冲区2.窗口大小 6.连接管理机制 1.TCP头部格式 TCP全称为"传输…...

java-函数式编程-函数对象
定义 什么是合格的函数?无论多少次执行函数,只要输入一样,输出就不会改变 对象方法的简写 其实在类中,我们很多参数中都有一个this,被隐藏传入了 函数也可以作为对象传递,lambda就是很好的例子 函数式接口中…...

致远oa实时获取第三方自定义组件实现
背景 最近的一个需求不好处理,甲方没有准确的数据支撑,各种问题踢皮球,所以有时间实现一个实时获取数据的组件 需求 为了实现方便,封装了一个第三方数据实时展示的组件 只要修改配置,就可以实现字段的删除增加&…...

【Linux-点灯烧录-SD卡/USB烧写】
目录 1. 烧写方式2. 烧写之代码编译2.1 led.s->led.o2.2 led.o->led.elf2.3 led.elf->led.bin2.4 反汇编:led.elf->led.dis 3. 烧写之烧录到SD卡上:3.1 开启烧录软件权限:3.2 确定SD卡的格式:FAT323.3 烧录到SD卡上3.…...
PostgreSQL自带的命令行工具06- pg_isready
PostgreSQL自带的命令行工具06- pg_isready 基础信息 OS版本:Red Hat Enterprise Linux Server release 7.9 (Maipo) DB版本:16.2 pg软件目录:/home/pg16/soft pg数据目录:/home/pg16/data 端口:5777pg_isready 是 Po…...

【请投票】嘉立创EDA中LED发光二极管是否应有统一的引脚定义?
LED发光二极管的引脚定义应该是唯一的吗? 从下面原理图可以看到,器件型号仅尾缀不同,R代表RED红色发光二极管,W代表WHITE指白色发光二极管,是同一家制造商KENTO, 左侧红色发光二极管的1脚是阴极K,2脚是阳极…...

LT6911UXB HDMI2.0 至四端口 MIPI DSI/CSI,带音频 龙迅方案
1. 描述LT6911UXB 是一款高性能 HDMI2.0 至 MIPI DSI/CSI 转换器,适用于 VR、智能手机和显示应用。HDMI2.0 输入支持高达 6Gbps 的数据速率,可为4k60Hz视频提供足够的带宽。此外,数据解密还支持 HDCP2.2。对于 MIPI DSI / CSI 输出࿰…...
网络培训议题@2
目录 1. 如何通过IP和掩码确定网关:2. 网络路由的意义和配置方法:3. 网络Bond模式的区别和配置场景:4. 堆叠、VLAN、Trunk、聚合的意义:5. 虚拟机环境下VIP配置和常见问题:6. VXLAN拓展: 1. 如何通过IP和掩…...

linux文本三剑客之sed
目录 1、sed特点 1)sed命令格式 2)sed命令核心功能"增删改查" 2、sed命令执行过程 3、sed核心应用 1)sed-查找p 2)sed-删除d 3)sed-增加cai 4) sed-替换s 1、sed特点 sed stream editor 流编辑器…...
nginx封禁恶意IP
网络攻击时有发生 TCP洪水攻击、注入攻击、DOS等比较难防的有DDOS等 为了数据安全,防止对手爬虫恶意爬取,封禁IP 一般封禁ip linux server层面封IP:iptablesnginx层面封IP,方式多种(但req还是会打进来,让…...
「PHP系列」PHP MySQL 简介及运用
文章目录 一、PHP MySQL 简介二、MySQL安装三、相关链接 一、PHP MySQL 简介 PHP MySQL是一个结合了PHP和MySQL的组合,用于在Web应用程序中处理数据库操作。 MySQL: 定义:MySQL是一个流行的开源关系型数据库管理系统(RDBMS&…...

深度学习论文: XFeat: Accelerated Features for Lightweight Image Matching
深度学习论文: XFeat: Accelerated Features for Lightweight Image Matching XFeat: Accelerated Features for Lightweight Image Matching PDF: https://arxiv.org/pdf/2404.19174 PyTorch代码: https://github.com/shanglianlm0525/CvPytorch PyTorch代码: https://github.…...
C++之Eigen库基本使用
目录 1、矩阵的构造和初始化操作 2、矩阵的算术运算 3、矩阵的分解和求解 4、矩阵的变换 5、矩阵的访问和修改 6、矩阵遍历 7、线性方程组求解 8、其他操作 Eigen库是一个高级的C库,用于线性代数,矩阵和向量运算,数值分析和相关的数学…...

2024年 Java 面试八股文——SpringBoot篇
目录 1. 什么是 Spring Boot? 2. 为什么要用SpringBoot 3. SpringBoot与SpringCloud 区别 4. Spring Boot 有哪些优点? 5. Spring Boot 的核心注解是哪个?它主要由哪几个注解组成的? 6. Spring Boot 支持哪些日志框架&#…...
C/C++的指针、万能指针、常量指针和指针常量
C/C的指针 1、 指针的概念: 指针是一个变量,它存储的是另一个变量的内存地址,而不是变量的值。 指针变量的声明:在C/C等语言中,我们通过使用星号*来声明一个指针变量。例如,int *ptr; 这行代码声明了一个…...
Android Wi-Fi 连接失败日志分析
1. Android wifi 关键日志总结 (1) Wi-Fi 断开 (CTRL-EVENT-DISCONNECTED reason3) 日志相关部分: 06-05 10:48:40.987 943 943 I wpa_supplicant: wlan0: CTRL-EVENT-DISCONNECTED bssid44:9b:c1:57:a8:90 reason3 locally_generated1解析: CTR…...
SciencePlots——绘制论文中的图片
文章目录 安装一、风格二、1 资源 安装 # 安装最新版 pip install githttps://github.com/garrettj403/SciencePlots.git# 安装稳定版 pip install SciencePlots一、风格 简单好用的深度学习论文绘图专用工具包–Science Plot 二、 1 资源 论文绘图神器来了:一行…...
测试markdown--肇兴
day1: 1、去程:7:04 --11:32高铁 高铁右转上售票大厅2楼,穿过候车厅下一楼,上大巴车 ¥10/人 **2、到达:**12点多到达寨子,买门票,美团/抖音:¥78人 3、中饭&a…...

最新SpringBoot+SpringCloud+Nacos微服务框架分享
文章目录 前言一、服务规划二、架构核心1.cloud的pom2.gateway的异常handler3.gateway的filter4、admin的pom5、admin的登录核心 三、code-helper分享总结 前言 最近有个活蛮赶的,根据Excel列的需求预估的工时直接打骨折,不要问我为什么,主要…...

MMaDA: Multimodal Large Diffusion Language Models
CODE : https://github.com/Gen-Verse/MMaDA Abstract 我们介绍了一种新型的多模态扩散基础模型MMaDA,它被设计用于在文本推理、多模态理解和文本到图像生成等不同领域实现卓越的性能。该方法的特点是三个关键创新:(i) MMaDA采用统一的扩散架构…...
在Ubuntu中设置开机自动运行(sudo)指令的指南
在Ubuntu系统中,有时需要在系统启动时自动执行某些命令,特别是需要 sudo权限的指令。为了实现这一功能,可以使用多种方法,包括编写Systemd服务、配置 rc.local文件或使用 cron任务计划。本文将详细介绍这些方法,并提供…...

CocosCreator 之 JavaScript/TypeScript和Java的相互交互
引擎版本: 3.8.1 语言: JavaScript/TypeScript、C、Java 环境:Window 参考:Java原生反射机制 您好,我是鹤九日! 回顾 在上篇文章中:CocosCreator Android项目接入UnityAds 广告SDK。 我们简单讲…...
sqlserver 根据指定字符 解析拼接字符串
DECLARE LotNo NVARCHAR(50)A,B,C DECLARE xml XML ( SELECT <x> REPLACE(LotNo, ,, </x><x>) </x> ) DECLARE ErrorCode NVARCHAR(50) -- 提取 XML 中的值 SELECT value x.value(., VARCHAR(MAX))…...

C++ 求圆面积的程序(Program to find area of a circle)
给定半径r,求圆的面积。圆的面积应精确到小数点后5位。 例子: 输入:r 5 输出:78.53982 解释:由于面积 PI * r * r 3.14159265358979323846 * 5 * 5 78.53982,因为我们只保留小数点后 5 位数字。 输…...
HTML前端开发:JavaScript 常用事件详解
作为前端开发的核心,JavaScript 事件是用户与网页交互的基础。以下是常见事件的详细说明和用法示例: 1. onclick - 点击事件 当元素被单击时触发(左键点击) button.onclick function() {alert("按钮被点击了!&…...