当前位置: 首页 > article >正文

qData 企业级数据中台开源矩阵再添三员大将:主数据、指标、数据资产管理平台即将同步开放

一套真正可落地的企业级数据中台产品体系正在全面拥抱开源社区在政企数字化建设过程中“数据中台”这个词被频繁提及但实际落地时很多团队发现市面上的工具要么是单一平台要么功能割裂难以形成闭环。qData 不是“一个”数据中台而是一套覆盖数据全生命周期的产品体系。此前qData 数据中台社区版已率先开源获得了不少开发者和企业的关注。今天我们很高兴地宣布qData 主数据平台、qData 指标平台、qData 数据资产管理平台同步推出开源版并正式上架 Gitee 与 GitHub。一、先理解 qData 是什么一套体系而非一个平台许多人对数据中台的认知停留在“一个系统”层面但 qData 的真实定位是一套覆盖数据建设、治理、资产化与数据服务全过程的企业级数据中台产品体系Data Platform Suite它以统一的数据架构与治理规范为基础内置七大平台级产品数据中台已开源——数据集成、加工、建模与服务的“生产车间”元数据平台——数据体系的“监理图纸导航系统”主数据平台本次开源——企业核心对象的统一标准源指标平台本次开源——业务口径的统一裁判标签平台——数据与业务之间的翻译层数据资产平台本次开源——数据资产的统一管理后台数据资产门户平台——业务人员的统一用数入口这七个平台在统一架构下协同运转覆盖从采集、治理、建模、资产化到服务化、使用的完整闭环。qData 不等于一个数据中台而是以“数据中台”为生产核心的完整产品矩阵。本次开源的三款产品正是矩阵中不可或缺的关键拼图。二、qData-mdm 主数据平台让企业核心对象“书同文、车同轨” 平台简介qData-mdm是一套聚焦主数据建模、维护、采集、分发与质量治理的主数据管理平台致力于帮助企业建立统一的主数据标准、维护流程和共享机制。在线文档https://qdata.qiantong.tech源码仓库https://gitee.com/qiantongtech/qData-mdmGitee / GitHub 同步上架中欢迎 Star ⭐️ 典型使用场景场景描述典型客户主数据标准建模统一定义组织、客户、供应商、物料、产品等主数据模型集团企业、制造企业、国企平台主数据集中维护建立新建、变更、冻结、失效等统一维护机制中大型企业、共享服务中心主数据采集同步从业务系统采集主数据形成统一主数据底座制造企业、政务平台、信息化项目主数据分发共享将统一主数据分发到 ERP、HR、财务等下游系统集团企业、政企单位、行业平台主数据质量治理对主数据进行规则校验、任务执行与结果追踪数据治理团队、信息中心、运维团队 核心优势功能覆盖完整围绕“建模、维护、采集、分发、质量”提供主数据全生命周期管理建模维护一体化模型定义直接服务于后续维护与共享使用分类、实体、字典协同支持主题、实体模型、分类模型、数据字典等基础建模能力采集与分发能力提供采集任务、手动全量分发与分发监控打通上下游链路支持 Docker 部署便于快速安装、联调和使用 主要功能模块模块描述主题管理主数据模型主题目录树维护便于模型资产分层归类实体模型实体创建与维护、字段定义、关联配置、版本管理与发布分类模型树形层级结构维护如品类树、组织树支持扩展字段数据字典字典类型与字典项维护与实体/分类模型字段联动主数据查询按已发布模型进行列表检索、条件过滤与明细查看主数据新建/变更基于模型动态表单发起新增、修改、冻结、失效等操作数据源管理异构数据源连接信息维护为采集任务提供来源台账采集任务/实例/日志配置来源映射与执行策略支持全量/增量同步及运维追溯应用管理维护主数据分发目标应用档案分发配置/监控配置分发任务、手动全量分发及失败重发闭环质量规则/任务/实例/日志维护基础质量规则组合为任务并执行校验与追踪️ 技术栈后端Spring Boot、Spring Security、MySQL/达梦8、MyBatis-Plus、Redis、Knife4j前端Vue 3、Element Plus、Vite、AntV X6、ECharts部署支持源码启动与 Docker 部署JDK 1.8Node.js 16三、qData 指标平台让全公司用上“同一把数据尺子” 平台简介qData 指标平台是一套聚焦指标域与类目管理、指标模型与维度建模、原子指标与派生指标开发、指标任务调度、数据连接与指标 API 服务化开放的指标管理平台。在线文档https://qdata.qiantong.tech源码仓库https://gitee.com/qiantongtech/qData-metricGitee / GitHub 同步上架期待你的 Star ⭐️ 典型使用场景场景描述典型客户指标资产与目录管理按域、类目组织指标资产完成检索、上下架与版本管理数据中台团队、分析团队模型化指标开发基于事实表与维度表构建指标模型配置原子/派生指标数据开发、BI 与指标运营团队维度标准化通过单值维度统一维度表、主键与属性字段保证筛选口径一致数据建模、数据治理团队指标任务运维查看指标任务列表与详情手动触发执行与监控运维团队、指标负责人指标 API 开放将数据封装为可分类、可测试、可限流的 API对外开放服务开放平台、集成团队、业务系统建设方 核心优势指标与模型一体化从指标域、模型、维度到原子/派生指标形成连贯链路原子与派生分层原子指标承载基础计算与调度派生指标完成业务化配置开发与校验协同支持指标试运行、SQL 查看、结果预览与版本留痕API 服务发布支持 API 类目、参数配置、测试、限流及调用日志管理预计算引擎集成内置 Apache Flink 支撑指标预计算与调度任务 主要功能模块模块描述指标资产指标全生命周期管理查询、上下架、试运行、版本管理模型管理事实表维度表统一建模为指标开发提供底座单值维度业务对象维度信息标准化管理供指标筛选使用原子指标基于模型生成基础统计指标支持预计算与调度配置派生指标在原子指标基础上加工支持数据预览、SQL 查看与日志指标任务统一管理原子/派生指标任务查看详情并手动执行数据连接关系型数据库数据源接入与管理指标域管理指标域与维度类目分类体系建设指标 API将底层数据封装为标准化 API支持类目、版本、限流、测试调用日志API 调用过程统一记录与查询应用管理调用 API 的应用统一管理支持密钥重置️ 技术栈后端Spring Boot、Spring Security、MySQL/达梦8、MyBatis-Plus、Redis、Apache Flink、Knife4j前端Vue 3、Element Plus、Vite、AntV X6、ECharts部署需提前准备 Flink 环境支持 Docker Compose 编排四、qData 数据资产管理平台让数据从“资源”升级为“资产” 平台简介qData 数据资产管理平台提供资产目录与标签、元数据采集与管理、数据服务API开放以及资源门户相关能力围绕库表类数据资产支持登记、分类、检索、服务封装与对外发布。在线文档https://qdata.qiantong.tech源码仓库https://gitee.com/qiantongtech/qData-assetGitee / GitHub 同步上架Star ⭐️ 就是对我们最大的鼓励 典型使用场景场景描述典型客户库表资产纳管以数据库表类型资产为重点维护清单、类目、标签与业务术语制造、政务、集团型组织元数据采集与浏览按任务进行全量/增量采集支持库表元数据浏览与版本比对金融、运营商、大型互联网研发侧数据服务化将数据封装为 API配置类目、参数、限流与测试对外开放后端研发、系统集成、数据开放实施资源门户基础能力专题与资产发布管理后台内的数据集市与资产详情浏览政企信息中心、行业云/园区平台 核心优势资产编目能力资产类目、业务术语与标签体系统一维护提升检索效率元数据能力清晰覆盖库表元数据、版本管理与比对易于上手数据服务一体化API 配置、类目、限流、在线调试、应用授权及调用日志齐全门户能力后台集成专题、发布、集市与详情均以管理后台模块提供降低部署复杂度 主要功能模块模块描述资产概览仪表盘汇总资产规模、类型构成与新增趋势资产清单库表类资产列表检索支持增删改查与字段级管理资产标签标签分类树与标签条目维护支持挂接到资产业务术语术语分类与术语管理可配置近义词、反义词及与字段映射数据资产类目资产类目层级结构维护用于资产归档与筛选数据源管理数据源连接配置作为元数据采集前置条件元数据清单浏览库表元数据支持版本记录与字段差异对比元数据采集创建采集任务支持全量/增量同步与日志查看API 管理单表向导或 SQL 脚本方式生成数据 API支持限流与测试调用日志API 调用记录查询与详情查看应用管理消费 API 的应用档案维护与密钥管理专题管理门户专题层级维护资产挂接与展示资产发布资产发布流程管理待发布、已发布、下架等状态数据集市/资产详情管理后台内按主题浏览资产、查看详情与发起访问申请️ 技术栈后端Spring Boot、Spring Security、MySQL/达梦8、MyBatis-Plus、Redis、Knife4j前端Vue 3、Element Plus、Vite、AntV X6、ECharts部署支持源码与 Docker 部署元数据采集侧当前以 MySQL 接入为主五、开源共建让企业级数据中台触手可及qData 开源版的愿景是降低企业构建数据中台的门槛让更多开发者和团队能够基于成熟的产品体系快速落地数据能力。无论是主数据管理、指标体系建设还是数据资产盘点与服务化开放这三个平台都能独立部署、开箱即用也可与已有的 qData 数据中台无缝集成。我们承诺所有开源版本核心功能完整无强制付费墙在线文档持续更新提供部署指南与接口说明社区 Issue 与 PR 积极响应欢迎共同完善如何参与Star ⭐️我们的仓库Gitee / GitHub 搜索 “qData” 或访问官网Fork 代码搭建本地环境体验功能提交 Issue提出功能建议或 Bug 反馈贡献 PR与我们一起迭代产品如果 qData 系列开源项目对您有帮助请点个 Star ⭐️这是我们持续更新的动力六、总结从“一个数据中台”到“一套产品体系”qData 正在用开源的方式重新定义企业数据基础设施的落地路径。本次同步开源的主数据平台、指标平台和数据资产管理平台填补了数据治理、口径统一与资产化运营的关键环节与已开源的数据中台共同构成了完整的 qData 数据中台产品矩阵。访问在线文档了解更多https://qdata.qiantong.tech仓库地址请关注 Gitee / GitHub 官方账号搜索qData-mdm、qData-metrics、qData-asset即可找到对应项目。qData产品官网https://qdata.tech期待与您在开源社区相遇共同打造更强大的企业级数据中台产品体系

相关文章:

qData 企业级数据中台开源矩阵再添三员大将:主数据、指标、数据资产管理平台即将同步开放

一套真正可落地的企业级数据中台产品体系,正在全面拥抱开源社区 在政企数字化建设过程中,“数据中台”这个词被频繁提及,但实际落地时,很多团队发现市面上的工具要么是单一平台,要么功能割裂,难以形成闭环。…...

Python 协程池限速调度机制

Python协程池限速调度机制:高效并发的智慧闸门 在异步编程领域,Python的协程池通过限速调度机制,成为平衡性能与资源消耗的关键技术。当高并发任务需要访问外部API或数据库时,无节制的请求可能导致服务端过载或触发反爬策略。协程…...

知识库平台和文档管理系统差别在哪?选型前先看这篇

本文将深入对比5大企业知识文档管理系统:PingCode、亿方云、石墨文档、够快云库、爱数AnyShare 很多企业在数字化办公选型时,常把“文档管理”和“知识库”混为一谈。前者侧重规范存储与流程控制,后者侧重协作共享与价值沉淀。选错工具不仅效…...

Nacos 进阶:持久化 + 集群搭建,让你的服务稳如老狗!

上一篇文章我们学习了 Nacos 的基本使用,很多小伙伴私信我说:"单机 Nacos 用着挺香的,但是万一挂了怎么办?"确实,单机 Nacos 存在两个致命问题:数据丢失:Nacos 默认用嵌入式数据库 De…...

西门子PLC S7-1200电动机的报警控制

【实例16】预警启动1.PLC控制任务说明为保证设备的运行安全,许多大型生产机械(如起重机、龙门刨床等)在运行启动之前都用电铃或蜂鸣器发出报警信号,预示设备即将启动,警告人们迅速退出危险地段。控制要求如下&#xff…...

备忘录笔记

随便写点小知识按位或: |, 按位与:&...

Dify v1.13.x 版本更新速览:从人机协作到架构升级

Dify 在 2026 年 2-3 月密集发布了 v1.13.0、v1.13.1、v1.13.2、v1.13.3 四个版本。这四次更新虽属小版本迭代,却包含了标志性的人机协作功能、架构层面的重要调整,以及多项安全与稳定性修复。本文将梳理这四个版本的核心变化,帮助你快速了解…...

Rust的#[repr(packed)]应用密集

Rust的#[repr(packed)]应用密集:高效内存布局的利器 在系统编程领域,内存布局的精细控制往往是性能优化的关键。Rust作为一门注重安全与效率的语言,提供了#[repr(packed)]属性,允许开发者取消结构体的内存对齐,实现数…...

FireRed-OCR Studio入门必看:支持数学公式LaTeX渲染的OCR工具深度评测

FireRed-OCR Studio入门必看:支持数学公式LaTeX渲染的OCR工具深度评测 1. 为什么需要专业OCR工具 在日常工作和学习中,我们经常遇到需要将纸质文档或图片中的文字转换为可编辑文本的情况。普通OCR工具虽然能识别文字,但面对复杂文档时往往力…...

YOLOv5到v8怎么选?我用同一份植物病害数据集做了个全面对比(附性能测试结果)

YOLOv5到v8实战评测:植物病害检测模型选型指南 在计算机视觉领域,目标检测模型的迭代速度令人目不暇接。作为YOLO系列的最新成员,从v5到v8每个版本都带来了显著的性能提升和架构创新。但对于实际项目中的技术决策者而言,面对众多版…...

从网线到光纤:保姆级图解SFP光模块在千兆以太网中的信号转换全流程

从网线到光纤:保姆级图解SFP光模块在千兆以太网中的信号转换全流程 当你盯着机房交换机上闪烁的绿色指示灯时,是否好奇过那些跳动的光点背后隐藏着怎样的技术魔法?作为网络工程师,我们每天都在与SFP光模块打交道,但很…...

【k8s springcloud maven】解决fabric8:Kubernetes-client与SpringCloud版本冲突的Maven依赖管理策略

1. 当Kubernetes-client遇上SpringCloud:依赖冲突的典型场景 最近在帮朋友排查一个微服务项目时,遇到了典型的依赖版本冲突问题。项目中使用fabric8的kubernetes-client(6.13.0版本)管理Kubernetes集群资源,同时采用了…...

告别仿真卡顿!用Vivado的ILA核做“硬件断点”实时抓波形,调试效率翻倍

硬件调试革命:用Vivado ILA核实现实时波形捕获与高效问题定位 在FPGA开发中,最令人头疼的莫过于遇到那些"时隐时现"的硬件问题——仿真环境下运行良好,一旦烧录到实际硬件中就出现各种异常。传统仿真方法不仅耗时漫长,更…...

DAMOYOLO-S模型Python API设计与面向对象封装

DAMOYOLO-S模型Python API设计与面向对象封装 1. 引言 如果你正在寻找一个轻量级但性能不俗的目标检测模型,DAMOYOLO-S很可能已经进入了你的视野。它凭借不错的精度和友好的推理速度,在很多实际场景里都挺能打。但当你兴冲冲地从GitHub上拉下代码&…...

内存的操作权限(堆空间、栈空间)

...

从Excel到Cadence:基于ODBC的智能元件库构建与实战

1. 为什么需要智能元件库管理 每次画原理图最头疼的就是找元件符号和封装对不对?我见过太多工程师的电脑桌面上堆满了各种版本的元件库,每次新建项目都要花半天时间核对封装是否匹配。更可怕的是,当某个元件参数需要更新时,得在所…...

【鸿蒙实战】从零编译ONNX Runtime,解锁鸿蒙端侧AI推理

1. 为什么要在鸿蒙上折腾ONNX Runtime? 最近几年AI应用爆发式增长,手机端跑模型已经不是什么新鲜事了。但当我第一次尝试在鸿蒙系统上部署AI模型时,发现事情没那么简单——官方居然没有提供现成的ONNX Runtime库!这就像你买了台新…...

mysql修改字段长度是否影响数据_隐式转换与字符集限制分析

ALTER TABLE MODIFY 会静默截断超长数据,且不报错;需先检查长度、开事务验证;utf8mb4下VARCHAR字符数≠字节数,索引易超限;TEXT不可直接转VARCHAR;隐式转换多因collation不一致导致索引失效。ALTER TABLE M…...

零基础入门:使用Xinference快速部署tao-8k,体验长文本向量化

零基础入门:使用Xinference快速部署tao-8k,体验长文本向量化 1. 认识tao-8k:为什么选择这个长文本向量化模型 在当今信息爆炸的时代,处理长文本数据已成为许多应用场景的刚需。tao-8k是由Hugging Face开发者amu研发并开源的一款…...

Ubuntu 20.04服务器部署Youtu-Parsing:生产环境配置全攻略

Ubuntu 20.04服务器部署Youtu-Parsing:生产环境配置全攻略 最近在帮一个做内容分析的朋友搭建一套视频理解系统,他们需要从海量视频里自动提取关键信息。试了几个方案,最后选定了Youtu-Parsing,效果确实不错,但要把这…...

Ostrakon-VL扫描终端实战:对接RPA机器人自动触发补货OA流程

Ostrakon-VL扫描终端实战:对接RPA机器人自动触发补货OA流程 1. 项目背景与价值 在零售行业,货架缺货是影响销售转化的重要因素。传统的人工巡检方式效率低下,且难以实现实时响应。Ostrakon-VL扫描终端结合RPA技术,构建了一套完整…...

Redis 缓存预热方案优化实践

Redis 缓存预热方案优化实践 在分布式系统中,Redis 作为高性能缓存层,对系统响应速度至关重要。冷启动或缓存失效时,大量请求直接穿透到数据库,可能导致服务雪崩。缓存预热通过提前加载热点数据到 Redis,有效缓解这一…...

AI Agent生产环境监控清单:10个核心指标与告警阈值设置

AI Agent生产环境监控清单:10个核心指标与告警阈值设置 关键词:AI Agent监控、生产环境可观测性、告警阈值配置、LLM应用运维、Agent可靠性、大模型应用SLO、智能体故障排查 摘要:随着AI Agent在企业客服、内部知识库、自动化办公等场景的大规模落地,生产环境的稳定性和输出…...

一文吃透路由基础:从核心概念到转发全流程,网工入门必看

我们日常上网、聊天、访问网页,数据能从终端穿越千里抵达目标服务器,背后最核心的网络基石,就是「路由」。很多刚接触网络的朋友,总会被路由、路由器、路由表等概念绕晕,也搞不懂管理距离、度量值的核心区别&#xff0…...

DeepSeek-R1-Distill-Qwen-1.5B应用场景:智能客服系统搭建案例

DeepSeek-R1-Distill-Qwen-1.5B应用场景:智能客服系统搭建案例 1. 引言:小模型也能有大作为 如果你正在为搭建智能客服系统发愁,觉得大模型太贵、小模型太笨,那今天这个案例可能会让你眼前一亮。 我最近帮一家电商公司搭建了一…...

算法训练营第四天|螺旋矩阵

今日学习的文章链接和视频链接: https://www.bilibili.com/video/BV1SL4y1N7mV/ 自己看到题目的第一想法: 第一想法是,先定义矩阵的上下左右四个边界,然后按照从左到右,从上到下,从右到左,从下到…...

像素幻梦效果展示:FLUX.1-dev+LoRA生成RPG角色/场景/道具高清像素图

像素幻梦效果展示:FLUX.1-devLoRA生成RPG角色/场景/道具高清像素图 1. 像素幻梦创意工坊概览 Pixel Dream Workshop(像素幻梦创意工坊)是一款基于FLUX.1-dev扩散模型的下一代像素艺术生成工具。它采用明亮的16-bit像素工坊视觉设计&#xf…...

IDEA中JDK版本自动回滚?Maven项目终极解决方案(附多模块配置技巧)

IDEA中JDK版本自动回滚的根治方案:Maven项目配置全指南 每次在IDEA中修改完JDK版本,一刷新Maven就回到解放前?这种令人抓狂的问题困扰着不少Java开发者。特别是在多模块项目中,不同模块的JDK版本频繁跳转,不仅影响开发…...

SAM 3图像视频分割:小白友好,快速部署体验AI黑科技

SAM 3图像视频分割:小白友好,快速部署体验AI黑科技 1. SAM 3是什么?它能做什么? SAM 3是Facebook推出的一个强大的AI模型,专门用于图像和视频中的物体分割。简单来说,它就像一个"智能剪刀"&…...

Qwen3-14B效果展示:看它如何理解复杂指令,进行深度逻辑推理

Qwen3-14B效果展示:看它如何理解复杂指令,进行深度逻辑推理 如果你对大语言模型的印象还停留在“聊天机器人”或者“文本生成器”的阶段,那么Qwen3-14B可能会彻底颠覆你的认知。它不是一个简单的问答工具,而是一个能够理解复杂意…...