-
使用深度学习方法从MRI数据中自动识别阿尔茨海默病的论文研究-针对大量数据管理
资源介绍
3.13 管理大量数据
有时候数据仓库中需要进行管理的大量数据是一个重要问题。建立简要记录是大量数据
管理的一种有效技术。在把操作型环境中的详细记录转入数据仓库中简要记录的过程中,数
据量的降低是显著的。一般通过建立简要记录可以使数据量降低 2~3个数量级。由于这种可
能性,创建简要记录是每一个数据体系结构设计人员手中很强有力的一种技术。事实上,与
其他设计或数据管理技术相比较,要想在数据仓库中有效地管理大量数据,那么建立简要记
录应该是数据仓库体系结构设计者应该考虑的首选技术和最强有力的技术。
然而,采用这种方式也有其不足之处。当采用简要记录方式的时候,必须清楚的是这样
将会失去数据仓库的一些能力或功能。首先,只要实现数据的聚集,信息的详细程度就会降
低。但有时,详细程度的降低不一定是坏事。这时的设计者必须能够保证详细程度的降低对
于利用该数据仓库进行决策支持的分析人员来讲是无关紧要的。数据仓库构造者保证所丢失
的细节并不特别重要的第一道防线 (最简单有效的)就是重复建立简要记录。这样设计人员就有
了很好地控制改变的灵活性。简要记录内容设计的第一遍为第二遍提供依据,依此类推。只
要数据仓库开发过程中每一遍走得很小,很快。就不至于在简要记录中忽略对终端用户来讲
是重要的某种要求。但是当简要记录的创立和开发的第一遍走得非常大,设计者可能会把他
们自己带入危险的境地。此时,由于数据仓库相当大,它的内容不能被仔细改动而导致重要
细节的忽略,使设计人员可能使自己陷于难堪的境地。
可以保证重要细节在简要记录的创建过程中不被丢失的第二种方法 (可以和第一种共同使
用)是在建立简要记录的同时建立历史细节的备用层,如图 3 - 4 4所示。
图3-44 另一种典型数据仓库体系结构—所有的细节数据在需要的时候都可以得到,
而对于DSS处理的最好性能是常规性能
74 数 据 仓 库
下载
操作型数据
详细
存档
数据
简要
数据 标准D S S处理
在异常基础上
的报告
ESS
DSS