星型模型在复杂数据仓库环境中应用研究

星型模型在复杂数据仓库环境中应用研宄摘要:针对数据仓库中分散数据的整合问题,本文基于商用BI工具COGNOS对星型结构数据模型进行优化,创建底层模型和数据立方体。运行结果显示,数据模型易于整合分散事实数据,性能优越。Abstract:Astotheintegrationofthescattereddataindatawarehouse,inthispaper,weoptimizedthemodelofstarstructure,andcreatetheunderlyingmodelanddatacubebasedonthecommercialBItoolCOGNOS.Therunningresultsshowthatthedatamodeliseasytointegratethedisperseddata,andtheperformanceissuperior.关键词:星型模型;数据整合;位图索引;量;数据仓库Keywords:StarModel;dataintegration;bitmapindex;computationalquantity;datawarehouse中图分类号:TP311文献标识码:A文章编号:1006-4311(2015)31-0077-031概述在目前石油行业信息系统中,业务数据不断集聚。在这些不断增长的海量业务数据中蕴含着大量有用信息。为有效挖掘出蕴含在这些海量数据中的业务规律,本文基于这些地域分布广泛、用户类型繁多的海量业务数据,采用商用BI工具cognos,对星型模型进行改进后整合事实数据,建立汇总数据源有效支撑了数据规律的分析与展现。2相关概念2.1数据仓库数据仓库是一个面向主题的、集成的、不可更新的、随时间变化以支持管理层决策的数据集合[1]。2.2星型模型2.2.1星型模型[2]的定义定义四元组,其中:①Di为从域DIM(i)中抽取的维度名,定义n个维度名的集合0=山1,D2,D3,…,Dn}。②Mi为从域MEASURE(i)抽取的度量名,定义k个度量名的集合M={M1,M2,M3,…,Mk}。③维度名集合和度量名集合不相交,即DnM=??b维度名集合与度量名集合的并集为事实表F,即F=DUM。④Ai为从域DOMATTR(i)中抽取的属性,定义t个元素的集合A={A1,A2,A3,…,At}。⑤定义f:D->A*—对多映射,即每个维度名对应一个属性集合。不同维度名对应的属性集互不相交。2.2.2星型模型的优势C3]星型模型基于一个特定的主题,体现了数据库对数据结构和组织的要求。由于结构简单,易于数据的操纵和理解,且具有良好的数据连接路径,在整个数据仓库生命周期中易于修改及增补。由于包含用户查询和分析的所有属性,查询过程简单化。通过星型连接与星型索引,进一步提高OLAP查询性能。查询效率高。基于星型模型的数据经过预处理后放到事实表中,无需进行大表联接,只需扫描事实表即可查询,因此访问效率高;甚至可以充分利用维表占用空间小的特点,把维度表放在高速缓存中,进一步提高查询效率。3基于星型结构的数据模型设计3.1整合事实数据对于同类性质、分散于多个事实表中的业务数据建立数据模型,通过整合多个事实表中的业务数据以满足数据展现层跨域取值的事实数据需求,扩充数据分析涉及数据范围。在底层数据模型中通过UNION不同事实表中业务数据,构建统一虚拟事实表解决数据分散这一问题,如图1所示为实际应用中底层编码实现构建虚拟事实表的基本模式。即各个事实表业务数据集合并运算形成统一业务数据集,多张事实表对外整合为一张事实表数据块整合示意图,如图2所示。虚拟事实表作为一个整体,通过JION方式关联各维度表,形成星型结构。3.2维度表关联事实表虚拟事实表通过各外键关键字与相关维度表主键关键字建立关系实现事实表与维度表的关联,建立星型结构数据模型,如图3所示为石油行业中基于星型结构的一种数据模型样例。3.3规划不同业务逻辑区分不同的数据请求性质,如图4所示,经常性数据请求(比如时间维度信息、机构维度信息等)可以先行提取作为共性业务逻辑进行预运算,偶然性数据请求(比如特定维度下指标量)推迟至客户端实现计算,有效减少共性运算的重复计算,从而减少整个算题的计算量[5]。布局不同的计算位置,如图5所示,进行数据整合时,充分运用服务器端计算资源,共性业务逻辑提前在服务器端数据模型中进行预运算,减少客户端计f量,以减少计算总量,减少带宽占用,缩小计算时3.4对事实表字段建立主键在数据库中对事实表主键字段建立位图索引[5],可以大幅减少数据模型物理读取量和逻辑读取量,减对事实表主键建立添加位图索引后,如表1所示,数...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供参考,付费前请自行鉴别。
3、如文档内容存在侵犯商业秘密、侵犯著作权等,请点击“举报”。

常见问题具体如下:

1、问:已经付过费的文档可以多次下载吗?

      答:可以。登陆您已经付过费的账号,付过费的文档可以免费进行多次下载。

2、问:已经付过费的文档不知下载到什么地方去了?

     答:电脑端-浏览器下载列表里可以找到;手机端-文件管理或下载里可以找到。

            如以上两种方式都没有找到,请提供您的交易单号或截图及接收文档的邮箱等有效信息,发送到客服邮箱,客服经核实后,会将您已经付过费的文档即时发到您邮箱。

注:微信交易号是以“420000”开头的28位数字;

       支付宝交易号是以“2024XXXX”交易日期开头的28位数字。

客服邮箱:

biganzikefu@outlook.com

所有的文档都被视为“模板”,用于写作参考,下载前须认真查看,确认无误后再购买;

文档大部份都是可以预览的,笔杆子文库无法对文档的真实性、完整性、准确性以及专业性等问题提供审核和保证,请慎重购买;

文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为依据;

如果您还有什么不清楚的或需要我们协助,可以联系客服邮箱:

biganzikefu@outlook.com

常见问题具体如下:

1、问:已经付过费的文档可以多次下载吗?

      答:可以。登陆您已经付过费的账号,付过费的文档可以免费进行多次下载。

2、问:已经付过费的文档不知下载到什么地方去了?

     答:电脑端-浏览器下载列表里可以找到;手机端-文件管理或下载里可以找到。

            如以上两种方式都没有找到,请提供您的交易单号或截图及接收文档的邮箱等有效信息,发送到客服邮箱,客服经核实后,会将您已经付过费的文档即时发到您邮箱。

注:微信交易号是以“420000”开头的28位数字;

       支付宝交易号是以“2024XXXX”交易日期开头的28位数字。

文秘专家
机构认证
内容提供者

1

确认删除?