分布式数据仓库元数据的安全模式探讨.pptVIP

分布式数据仓库元数据的安全模式探讨西南交通大学信息学院刘林引言随着计算机网络和数据库技术的迅速发展，使得企业的管理进入了一个全新的时代。人们已经不满足进行简单的信息管理和各种数据及事务管理。同时计算机技术，网络技术和数据库技术的迅猛发展为决策支持系统(DDS)提供了必要的技术环境。数据仓库技术正是为了解决信息管理和大量数据之间矛盾的出现的。1.分布式数据仓库数据仓库环境有单一中央集成和分布式两种类型。随着经济社会的发展，使得企业的经营管理模式自然地呈现出分布式的特点。同时由于一些其他的原因，当前企业内部存在许多不兼容却又相互独立的事务处理系统，对这些系统中的数据进行相关的集成，可以方便向分析人员提供统一的数据视图成本低。对于一个数据仓库，采用分布式技术时。软硬件成本要低于采用大的，中央集成的数据仓库理论上的存储容量无限。由于存储服务器是分布式安放，如果数据仓库中的数据量要超过设计时的理论数据量时，可以通过直接增加存储服务器来增加存储容量。1.1分布式数据仓库的优越性1.2局部数据仓库局部数据仓库在远程站点上提供和处理数据，它包含局部站点上的历史的和集成的数据，且各个局部站点上的数据结构和数据各不相同它的数据各自来源于实际运作系统，通常不同地域不同群体之间可以用不同的技术构造数据仓库1.3全局数据仓库全局数据仓库的范围涉及到整个企业或者组织。是整个企业内部公共的，历史的和集成的数据集合。和局部数据仓库的数据源不同的是，全局数据仓库的数据不仅仅可以来源于自己的实际操作环境，而且也可以来源于局部数据仓库和外部数据源，全局数据仓库不是对从局部数据仓库来的数据进行简单的堆积，而是对局部数据仓库中的数据进行重新组合，综合集成1.4数据模式全局数据仓库包含企业内部的公共集成数据，是对局部数据仓库中数据进行加工，综合处理后的结果。如何将局部数据仓库的数据映射到全局数据仓库是成功的建造分布式数据仓库环境的关键。全局数据仓库拥有一个公共的数据结构，反映内部所有的公用数据。在分布式数据仓库系统中，元数据起着非常重要的作用，通过它可以协调不同地区，不同服务器上局部数据仓库中的数据结构。毫无疑问，元数据是实现数据一致性和相容性的重要工具。2.元数据元数据是数据仓库的一个重要组成部分，元数据就是数据的数据。自从有了程序和数据，元数据就是信息处理环境的一部分。它在数据仓库环境中扮演建立，维护，管理和使用的各个方面的关键角色。业务元数据。用业务名称，定义，描述和别名来表示数据仓库中的各种属性，直接供用户使用。01技术元数据。描述了源系统，数据转换，抽取过程，工作流，加载策略及目标数据库的定义等，供技术开发人员使用02商业元数据。描述了目标表的信息，刷新时间，粒度，记录数按时执行时间等，供操作人员使用。03元数据按功能和使用用户可以分为三类数据仓库一般分为三层：最下面的是数据提取层，中间的是数据存储层，上面的是数据显示层。底层完成对数据源的数据进行抽取和转换，并装载到数据仓库。存储层将下层提供的数据按各种合理的数据结构进行进行组织和存储，并对显示层提供支持。顶层包括查询和分析及数据挖掘等为使用人员提供方便。元数据商品历史数据业务显示层数据存储层数据提取层商业元数据技术元数据外部数据源OLAP分析,查询01数据仓库用户层及开发人员02销售历史数据业务元数据03元数据是数据仓库数据的集合，与传统的数据库中数据字典作用类似，在数据仓库中是通过元数据来记录数据仓库所存储数据的结构和数据之间的关系。外部数据源的数据要进入数据仓库需要经过数据的抽取，数据的清洗，数据的转换，数据的并归等处理数据的同步和一致性是数据仓库系统的一项重要工作。数据仓库的更新操作也需要元数据机制来进行记录。并且由于维护数据的一致性是一项动态的工作，需要在系统运行过程中保持动态监测和维护。所以元数据机制还要动态的记录数据的一致性维护执行情况12元数据的建立过程