DAP数据分析平台数据服务介绍
在企业中,由于开发时间或开发部门的不同,往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行,这些系统的数据源彼此独立、相互封闭,使得数据难以在系统之间交流、共享和融合,从而形成了\"信息孤岛\"。
随着信息化应用的不断深入,企业内部、企业与外部信息交互的需求日益强烈,急切需要对已有的信息进行整合,连通“信息孤岛”,共享信息。许多行业提出 将企业内外部数据进行统一治理及高效利用辅助决策分析 的需求,在这种背景下以互联网、云计算等为代表的新一代信息技术被广泛应用,数据分析相关产品成为解决此类问题的重要工具。
整体介绍
DAP数据分析平台是一款专门 用于企业大数据平台构建 的产品,它可以对从业务系统或者ODS中抽取来的海量数据进行高效存储、计算、分析并处理。最终将有价值的数据以可视化的形式进行展现,能够有效地帮助企业清晰地分析优劣势,从而调整企业策略,加快企业的信息化发展与整体竞争力
(相关资料图)
1.产品体系
数通畅联的产品可以通过不同的组合来解决不同的问题,帮助企业范围内建立起一整套统一、规范的IT架构标准体系,包括 数据规范、服务规范、流程规范、界面规范、接口规范 等,彻底解决了当前面临的信息孤岛问题,有利于提高效率和降低成本。下面介绍一些数通畅联的产品体系,如下:
上图所示通过DAP数据分析平台+MDM基础数据平台+ESB企业数据总线组成了数据中台方案,本次介绍的DAP数据分析平台就是此方案的核心,基础数据进行主数据治理, DAP数据分析平台进行业务数据治理 ,通过ESB进行数据的集成,帮助整合企业数据,统一管理,提升企业的数据价值。
2.产品说明
DAP数据分析平台中预置了丰富的组件,饼状图、条形图、散点图、折线图等满足企业的真实所需。它可以对从业务系统或者ODS中抽取来的海量数据进行高效存储、计算、分析并处理。最终将有价值的数据以可视化的形式进行展现,能够有效地帮助企业清晰地分析优劣势,从而调整企业策略,加快企业的信息化发展与整体竞争力。
数据分析平台功能有:
1. 数据来源 (应用系统定义、数据源头配置、ODS数据定义) 数仓模型 。
2. 数仓模型 (业务主题、维度配置、事实配置、模型配置、指标管理)。
3. 数据调度 (规则校验、调度资源(同步资源、加工资源)、调度任务、调度日志(同步日志、加工日志)、质量日志、通知日志)。
4. 分析模型 (数据集配置、立方体配置、业务类报表、多维度分析)。
5. 展现模型 (导航管理、组件管理、展现主题、装饰管理)。
6. 数据服务 (接收服务、查询服务、统计服务、指标服务、业务服务)。
7. 反向集成 (集成配置、数据管理、数据分发)。
8. 数据标签 (标签定义、标签配置、标签画像)。
9. 统计分析 (数据地图、质量分析、血缘分析、影响分析)。
10. 系统管理 (组织管理、角色管理、人员管理、功能管理、编码类型、编码管理、系统日志)。
本次介绍数据服务内容,数据服务分为接收服务、查询服务、统计服务、指标服务、业务服务。
3.功能说明
DAP是数据中台重要组成部分,数据中台是指通过企业内外部多源异构的数据采集、治理、建模、分析、应用使数据对内优化管理提高业务,对外可以数据合作价值释放,成为企业数据资产管理中枢,数据中台对外发布不只是可视化展现,还需要支持对外提供数据,所以DAP数据服务功能分别有: 接收服务、查询服务、统计服务、指标服务、业务服务 。
接收服务
接收服务是对ODS数据抽取的一种方式,通过对外接口把业务系统的数据同步到ODS中间库里。
1.功能介绍
ODS有几种同步数据方式,分别是 源库读取、接口同步、流程同步、手工录入 ,其中接口同步一种是和流程同步一样生成一个集成流程,一种是通过接口进行同步数据,如果ODS选择接口同步就会在接收接口处生成一条服务,通过接收接口能够查看到接口地址和入参格式,通过样例就可以进行调用。
2.配置扩展
创建一个ODS中间表,在同步方式选择接口推送模式,然后勾选上生成介绍服务。
创建表之后我们可以在接收服务中找到刚创建的服务接口:业务系统就可以调用这个接口进行数据同步了。
3.扩展效果
双击数据之后可以看到入参样例:
找到ODS数据库中刚刚创建的的表,可以看到当前数据为空:
点击执行,刷新数据库,可以看到数据同步已经过来了。
查询服务
查询服务是对数据集数据对外发布的一个服务,通过数据集编码和条件进行查询数据集中数据。
1.功能介绍
查询服务数据集通过发布生成数据集获取接口 ,数据集是直接通过数据模型生成的数据集合,直接是数仓的数据展现出来,通过此接口的条件默认是数据集编码和10条数据,也可以通过配置条件,通过条件查询数据集中的数据。
2.功能扩展
配置好数据集之后点击发布按钮就可以看到数据接口按钮变亮:
发版后可以进行反发布:
发布后在查询服务中:
3.扩展效果
点击发布后我们可以在查询服务中找到刚刚发布的数据,如下图:
选中数据,点击数据预览可以看到配置好的数据:
统计服务
统计服务是对立方体数据对外发布的一个服务,通过立方体编码和条件进行查询立方体数据。
1.功能介绍
通过发布生成立方体数据获取接口,通过接口可以获取到立方体到汇总计算数据,此接口的条件默认是立方体编码和10条数据,也可以通过配置条件,通过条件查询立方体中的数据。在统计服务中, 可以根据配置的条件字段以及排序配置使数据以排序(降序)形式展现 。
2.配置扩展
选择配置好的立方体,点击发布按钮后,可以看到数据接口按钮变亮:
点击发布后就生成对应的统计服务:
3.扩展效果
在立方体发布后我们可以在统计服务中看到该条数据,如下图。在统计服务中,可以通过配置条件,排序配置查询立方体中的数据。
点击数据预览,可以查看根据条件配置的数据:
指标服务
指标服务是对指标数据对外发布一个服务,通过立方体编码和条件进行查询立方体数据。
1.功能介绍
指标实例通过发布生成指标阈值获取接口,此接口的条件默认是指标编码和10条数据,也可以通过配置条件,通过条件查询数据集中的数据,并且可以通过配置表达式来控制数据的阈值,在数据预览时,超出阈值的数据会以高亮形式展现出来并且发起报警策略 进行邮件、短信提醒 ,也可以调用事件进行回写操作。
2.配置扩展
在新增指标页面我们可以选择组成类型、范围类型、功能类型以及来源类型,
数据来源可以选择数据集、立方体以及模型:
保存之后,点击指标元数据,可以在元数据中添加字段,以及修改字段名称:
指标实例中可以选择配置指标的实例类型为单条或多条以及添加条件配置和排序配置:
指标实例还支持配置阈值,通过配置表达式来控制数据的阈值:
可以配置通知策略,如果超出预置就可以报警:
3.扩展效果
在指标服务配置好之后点击发布按钮我们可以在指标服务中看到该条数据,如下图:
点击数据预览,可以看到我们配置好的数据,红色字体就是超出指标阈值的数据:
双击可以查看到超出预置的情况:
业务服务
DAP数据服务缺少业务对象服务,此对象服务从数据集、立方体、指标查询,定义单体、树形、主从模型通过配置的查询条件进行查询业务数据。
1.功能介绍
业务服务来源于数据集、立方体、指标查询 ,通过这些机构配置单体、树形、主从动态对象模型。选择来源后,要设置选择关联关系、条件(条件通过数据集配置条件获取) 用于构建树形、主从这种特殊格式。支持查询条件过来查询。
2.配置扩展
在数据服务添加业务服务功能:
列表页面 :列表显示对象名称、对象编码、对象类型、来源类型、发布状态、创建人、创建时间:
新增详情页面 :来源选择数据集、立方体、指标:
选择对象类型 (简单列表、树形表格、主从表):
3.扩展效果
配置完业务服务,点击发布按钮后,可以在服务查看中看到刚刚发布的服务,如下图:
点击数据预览后可以看到配置好的条件,点击执行,可以展现出参展示:
出参信息如下:
总结分析
无论是现在的互联网企业,还是传统型企业,都需要数据分析。企业决定前进方向或者推出某种新型产品,都需要数据分析来将数量庞大且凌乱的数据整合汇总,从而得出有用的信息,判断出前进的方向。
1.产品理解
数据分析必须要 以数据为先,分析为后 。对收集来的大量第一手资料和第二手资料进行分析,以求最大化地开发数据资料的功能,发挥数据的作用。这是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程,而本文介绍的数据分析平台就大大加强了数据治理方面,加强数据应用,无论数据服务和数据可视化展现都是提升企业数据价值的表现。
2.数据服务
DAP数据服务就是一种将治理后的标准数据从数据中台获取的方式,因为数据中台集成业务系统在展现层的数据一般不是本身系统的数据,直接抽取性能会变差,所以不可能在去业务系统中抽取,而DAP数据服务就刚好解决了这一问题。
3.产品展望
DAP数据分析平台是数通畅联数据中台的一部分,它可以提升企业的业务数据价值,从数据来源上梳理企业的业务数据,把可以提升企业业务价值的相关表放到中间库中,通过数据治理整合汇总这些数据,把这些数据变成完整的、可观察的数据,从而把数据展现出来。
DAP数据分析平台可以对采集到的所有海量数据进行分析,分析用的数据 由采样数据扩展至全部数据 ,从传统单一领域的数据扩展到跨领域的数据。大数据可以将不同领域的数据组合后进行分析,数据基于有关关系的数据源相同可以分析预测出正确的结果。
本文由 原创,欢迎转发,仅供学习交流使用,引用请注明出处!谢谢~
标签:
相关文章
当前快播:东方电热(300217.SZ):目前公司正在洽谈的熔盐储能项目有200MW,正在对接、即将招标的项目有2*75MW
格隆汇5月22日丨东方电热于2023年5月17日进行线上交流、5月18日进行路演活动,就“熔盐储能的放量时间点有
热门:乘联会:1-4月中国新能源汽车产量217.5万辆 同比增长32.8%
智通财经APP获悉,5月22日,乘联会发布2023年4月新能源汽车三电系统洞察报告。报告显示,2023年1-4月,中国
焦点热文:G7对华“去风险”,话音刚落,中方因“安全风险”叫停一美企合作
近日,G7峰会在日本广岛举行,G7领导人在会上不是谈论如何制裁俄罗斯,就是谈论如何打压中国。据统计,G7发
隆华新材:2022年6月底公司36万吨/年高性能聚醚多元醇扩建项目投产后,公司聚醚总产能达到72万吨/年|当前快讯
同花顺金融研究中心5月22日讯,有投资者向隆华新材提问,董秘,您好!我有几个问题需要了解:一是请问目前
惠州房管局:大亚湾项目低至4.8折系误读 装修和毛坯不一样
5月22日消息,广东省惠州大亚湾一楼盘近日因夸张的折扣力度备受关注。流传的折扣力度包括“低至4 8折”、“
亚洲LNG现货价格跌破10美元/百万英热 为两年来首次_热消息
在截至5月19日的一周,交付至东北亚(LNG-AS)的液化天然气(LNG)现货价格跌至每百万英热单位9 80美元,这是两
巨正源增资揭阳基地 156亿投资含丙烯酸丁酯及醋酸丁酯-全球热资讯
近日,巨正源宣布,以自有资金将揭阳公司的注册资本由人民币1亿元增至人民币5亿元,以支持揭阳大南海基地化
天天新资讯:ChatGPT类产品开启新牛市?大多头:又一个“咆哮20年代”要来了
财联社5月22日讯(编辑黄君芝)华尔街大多头、投资咨询公司YardeniResearch总裁兼首席投资策略师EdYardeni
维尼修斯:种族主义在西甲稀松平常 我将战斗到底 环球动态
体坛加,体坛+,罗诺亚,皇马,瓦伦西亚,维尼修斯,维尼修斯:种族主义在西甲稀松平常我将战斗到底,,足球,国际足
best regards用在邮件结尾格式_best regards什么意思 当前动态
1、BestRegards不同的场合有不同的用法:! BestRegards(此致敬意) "bestregards "
全球要闻:国乒最新赛程出炉!樊振东迎来首秀,孙颖莎强度最大,王曼昱登场
2023年5月22日,德班世乒赛进入白热化阶段,从第三个比赛日开始,国乒队员全部登场,樊振东、孙颖莎、王曼
【天天播资讯】深圳手板厂招聘_深圳手板厂
1、conofig手板厂很好!2、深圳市赛达尔conofig手板模型有限公司成立于1999年,公司专营产品模型设计、制作
全球微动态丨《武汉都市圈生态环境共保联治规划》正征集意见,6月14日截止
《武汉都市圈生态环境共保联治规划》正征集意见,6月14日截止---5月21日,极目新闻记者获悉,武汉将编制《
天天新动态:单位领导让我联系同学办事,事成之后的饭局没有请我,友情在利益面前一文不值!
我有一位当年要好的同学小林,毕业后从基层一线飞黄腾达,五年前调入集团总部上班。他在核心部门混了多年,
东莞控股(000828.SZ)同意解除轨道1号线PPP项目合同_天天快消息
智通财经APP讯东莞控股000828000828SZ发布公告2019年2月18日经公司2019年第一次临时股东大会批准公司出资参