您好,欢迎访问方案壹佰

上传文档

当前位置:首页 > 数字化方案 > 新兴产业 > 大数据/云计算 > 数据仓库技术架构方案

数据仓库技术架构方案

  • 930*130
  • 1 次阅读
  • 共21页
  • 2021-09-02 17:07:01

还剩... 页未读,继续阅读

免费阅读已结束,点击付费阅读剩下 ...

¥ 0 元,已有1人购买

免费阅读

阅读已结束,您可以下载文档离线阅读

¥ 48 元,已有0人下载

付费下载
文档简介:

数据仓库技术架构解决方案数据仓库技术架构解决方案1.11.1技术架构设计技术架构设计成功地实施一个仓库项目,通常需要很长的时间。如果仅仅着眼于短期成果,缺乏整体考虑,采用一种不健全的体系结构,不仅会增加系统开发和维护成本,而且必将对发挥数据仓库的作用造成不利的影响。因此一个综合,清晰的远景规划及技术实施蓝图将在整个项目的实施过程中起到重要作用。技术架构必须具有高度先进性和可扩展性,以满足业务需求的不断变化。一个完整的数据仓库系统包括数据源、数据转换区、数据仓库、数据集市、和数据展现层,通过数据仓库不同层次之间的加工过程,实现财政从数据资产向信息资产的转化过程。在不同层次之间的数据加工过程需要通过ETL技术实现,并对整个过程进行有效的元数据管理。基于对需求的理解,基于财政部的信息系统框架模型基础之上的财政决策支持系统技术架构如下图所示:如上图所示意,通过搭建灵活的、可扩展技术架构,在保持数据集市稳定性的同时,可以不断增加数据源,增加应用数据层、增加应用层,满足不断增加的业务分析应用需求。采用DW+ODS的数据仓库体系结构,使用全新的ETL模式对ODS进程每日数据更新,按周或月周期对数据仓库执行ETL过程。使用COGNOSBI做为前端的查询分析和数据挖掘工具,可满足各种日常数据处理操作,从即时简单报表查询到多维多级数据分析和挖掘,都能够在统一COGNOSBI平台上完成。1.1.1数据源和数据接口数据源和数据接口数据源指存储于财政各个业务系统的业务数据,以及未来的财政监管和外部数据。数据仓库系统将整合来自于这些系统的数据,形成财政统一的、一致的基础数据集,并提供给不同的应用主题形成数据集市。各个系统在体系架构、开发平台、数据定义、接口标准都会存在不同程度的差异;另外由于业务的不断变化,历史数据与当前数据之间的含义也可能存在不同,因此数据整合必须充分考虑源系统在技术和数据方面存在的差异。数据仓库系统将采用文本文件的方式从源系统获取数据。每个源系统会就与数据仓库之间就传输数据接口文件(IFF)的格式和方法制定标准,称之为接口规范。每个数据源会首先通过各自的数据导出程序(Extractor)生成接口文件存储在各自的

930*130
930*130
  • 460

    文档
  • 169.44

    金币
Ta的主页 发私信

460篇文档

评论

发表评论
< /21 > 付费下载 ¥ 48 元

方案壹佰

Copyright © 方案壹佰 鄂ICP备:19004533号-2 鄂公安网备:42018502003424 流量统计: 51LA统计
×
保存成功