基于元数据的数据治理分析功能说明

2023-11-15

数据对于企业来说是非常重要的,因为企业数据需要保证其完整性和准确性,所以需要数据治理。MDM基础数据平台是对各个业务系统的主数据进行治理,而各个业务系统中的业务数据则需要在DAP数据分析平台进行治理。

DAP数据分析平台通过与ESB应用集成平台结合使用场景主要是通过配置调度任务,通过执行调度任务调用ESB数据同步流程,实现数据的采集、校验、转换、传输、调度等操作,基础数据为DAP提供同源并标准的、一致的数据保障数据分析分析数据的准确性,而通过血缘分析和影响分析就看清整个DAP全生命周期数据的轨迹。 

1整体介绍 

DAP数据分析平台就是采集各个业务系统的数据,进行数据筛选(表和字段、数据)、质量校验等步骤建立数仓,保证了数据标准性、完整性、准确性,从而实现企业业务数据的统一,通过数据可视化展现、数据服务来展现DAP数据分析平台的价值。 

1.1产品体系 

首先介绍一下我们数通畅联的产品体系: 

我们数通畅联的所有产品都是通过K8S云平台进行部署搭建产品环境,通过不同的产品组合方案来解决企业面临的不同信息化困境,帮助企业完善信息化发展。 

上图所示通过DAP数据分析平台+MDM基础数据平台+ESB企业服务总线组成了数据中台方案,本次介绍的DAP数据分析平台就是此方案的核心,基础数据进行主数据治理,DAP数据分析平台进行业务数据治理,通过ESB进行数据的集成,帮助整合企业数据,统一管理,提升企业的数据价值。 

1.2产品说明 

数据分析平台全生命周期是通过采集各个业务系统数据构建数仓,从而进行有效分析的过程,能够真实、准确、有效的将企事业内部及行业外部相关数据进行可视化展现,帮助企事业提升行业洞察力,加强决策力,从而提升整体竞争力。 

数据分析平台功能有: 

1.数据来源(应用系统定义、数据源头配置、ODS数据定义)数仓模型。 

2.数仓模型(业务主题、维度配置、事实配置、模型配置、指标管理)。 

3.数据调度(规则校验、调度资源(同步资源、加工资源)、调度任务、调度日志(同步日志、加工日志)、质量日志、通知日志)。 

4.分析模型(数据集配置、立方体配置、业务类报表、多维度分析)。 

5.展现模型(导航管理、组件管理、展现主题、装饰管理)。 

6.数据服务(接收服务、查询服务、统计服务、指标服务、业务服务)。 

7.算法模型(算法配置、标签管理、算法日志)。 

8.统计分析(数据地图、质量分析、血缘分析、影响分析)。 

9.系统管理(组织管理、角色管理、人员管理、功能管理、编码类型、编码管理、系统日志)。 

1.3数据治理 

各个业务系统中的数据需要在DAP数据分析平台中进行治理分析,数据治理是通过ODS定义功能筛选业务系统表,在从ODS选择维度表和基础事实表,进行数据的校验清洗,保证维度表和基础数据中的数据是完整的、

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

基于元数据的数据治理分析功能说明 的相关文章

随机推荐

  • 面向对象设计原则——接口隔离原则

    接口隔离原则 Interface Segregation Principle ISP 使用多个专门的接口 而不使用单一的总接口 即客户端不应该依赖那些它不需要的接口 根据接口隔离原则 当一个接口太大时 我们需要将它分割成一些更细小的接口 使
  • matplotlib画图:柱形图、堆叠柱形图、分组柱形图。

    matplotlib画图 柱形图 堆叠柱形图 分组柱形图 分组柱形图与堆叠柱形图的区别 堆叠柱形图 有助于帮助我们观察部分与整体之间的关系 如 2020年每个区域每个季度的销售情况 分组柱形图 当比较一个整体的某组成部分与其他整体对应组成部
  • maven的详细下载和安装

    一 maven的安装 1 首先去官网下载maven https maven apache org download cgi 直接下载就可以使用 如果想要下载历史版本 点击下方的archives可以了 2 下载完成后 解压下载的maven安装
  • Loughran&McDonald金融文本情感分析库

    今天看到一个预测股价的项目 其中用到pysentiment库对金融文本数据进行情感计算 查了下该库的官方文档 发现该库提供了两大情感分析 Harvard IV 4 英文通用情感分析 Loughran MCdonald 英文金融情感分析 py
  • [深度学习]C++调用Python-YOLO模型进行目标检测

    文章目录 前言 C 调用Python的步骤 修改YOLOv5源码 C 读取Python返回值 前言 目前深度学习算法大多数是基于Python实现 但一些项目的框架是用C 搭建 所以就出现了在C 中调用模型的问题 本文主要记录C 调用Pyth
  • Activity使用Dialog样式导致点击空白处自动关闭的问题

    将Activity设置成窗口的样式实现Dialog或者Popupwindow效果在开发中是很常用的一种方式 在AndroidMenifest xml中将需要设置的Activity增加android theme android style T
  • 秒杀系统设计,高并发下的下单功能设计

    来源 常大皮卡丘 blog csdn net u013815546 article details 53928912 如有好文章投稿 请点击 这里了解详情 功能需求 设计一个秒杀系统 初始方案 商品表设计 热销商品提供给用户秒杀 有初始库存
  • Bit、Byte、kb、KB、MB、KiB、MiB各表示什么意思?

    1 Byte bit bit表示 位 是计算机中最小的数据单位 每一位的状态只能是0或1Byte表示 字节 8个二进制位构成1个字节 即1 Byte 8 bit 1个英文字母或者数字占用1个字节的空间 1个汉字占据2个字节的空间 2 Bps
  • [网络安全提高篇] 一一一.ISC会议观后感之网络安全需要新战法和新框架

    这是作者参加第九届互联网安全大会 ISC 2021 未来峰会的观后感 看到了非常多的大佬和师傅 还有许多还有 很多知识都值得我们学习 这篇文章主要介绍360集团创始人 董事长周鸿祎分享的 面向未来的新一代安全能力框架 战略演讲 其大会主题是
  • 什么是index.html? 如何创建和使用index.html?

    Websites provide a lot of web pages with different URLs but there are some defacto pages that exist most of the web site
  • osg学习(四十四)读取earth文件的几种方式

    1 osg Group node MapNodeHelper load arguments viewer 2 osg ref ptr
  • redis数据库hset(有序集合)类型常用命令

    redis数据库hset类型常用命令 1 向有序集合添加一个或多个成员 或者更新已存在成员的分数 zadd key score1 member1 score2 member2 2 获取有序集合的成员数 zcard key 3 计算在有序集合
  • C++之监控文件是否被修改

    软件开发过程中经常会用到配置文件 某些应用场景要求在软件运行时动态修改配置文件 此时就需要监控配置文件是否被修改 如果修改了 重新加载 FileWatcher h ifndef FILEWATCHER H define FILEWATCHE
  • openfire服务器源码,Openfire源码部署以及编译运行.doc

    Openfire源码部署以及编译运行 Openfire源码下载 可以去官方网站 官网地址 projects openfire 也可以利用eclispe自带的SVN插件导入 再次就过多介绍 官网上写的很清楚 源码部署编译 将源码解压到硬盘上
  • git:恢复文件

    如果需要在提交历史中跳转查看某个文件 可以使用 git restore 仅仅恢复工作树为某个提交版本 而不用切换分支 HEAD 仍然保持不变 假设现在git仓库如图 git restore 命令用于从 index 或某个 commit 恢复
  • dedecms的图片轮换

    思路 在dedecms中引进js和css要用 dede global cfg templets skin 引入文件用 dede include filename head htm 当你点图片的时候会到那一篇文章中 他用到的是dede arc
  • 对于女生来说,软件测试和前端,学哪一个更好啊

    其实前端和软件测试都算是对新手比较友好的学科了 而且是两个女生选择相对比较多的学科 简单好学要看你是从哪方面来考虑 至于哪家培训机构好 这个还是要看你自己的综合考量 选择学科还是要综合考量一下 发展前景 学习内容 发展方向 薪资 自己兴趣
  • 华为慧通真相--关联企业迷局

    华为慧通真相 关联企业迷局 回顾我自己已走过的历史 扪心自问 我一生无愧于祖国 无愧于人民 无愧于事业与员工 无愧于朋友 在 我的父亲母亲 一文中 华为的灵魂人物誓言旦旦 但是随着近期一系列真正 华为真相 浮出水面 不得不让人怀疑 这位笼罩
  • git 仓库 端口 prot22 :拒绝连接

    今天新入职一家公司 遇到了git 拉不下代码的问题 http 方式是可以的 但是 ssh 方式是不行的 所以今天记录一下 我是配置了的 生成ssh ssh keygen t rsa C your email example com 然后 配
  • 基于元数据的数据治理分析功能说明

    数据对于企业来说是非常重要的 因为企业数据需要保证其完整性和准确性 所以需要数据治理 MDM基础数据平台是对各个业务系统的主数据进行治理 而各个业务系统中的业务数据则需要在DAP数据分析平台进行治理 DAP数据分析平台通过与ESB应用集成平