DW2.0下一代数据仓库架构_第11章 时间相关数据(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0环境一个基本要素是数据与时间的关系。不像其他环境中数据与时间是无关的那样,在DW2.0环境中,所有数据都以这样或那样的方式与时间相关。...
DW2.0下一代数据仓库架构_第10章 DW2.0与安全(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 鉴于数据仓库应用的广泛性(包括交易处理系统和归档系统等),在DW2.0环境中采取不同形式的安全措施和从不同角度解决安全问题就不足为奇。保...
DW2.0下一代数据仓库架构_第9章 监视DW2.0环境(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0环境是复杂和动态的,它的各部分之间存在着复杂的联系。数据要从一个组件流向另一个组件,还要执行事务,并且还进行数据转换等。在很多方面D...
DW2.0下一代数据仓库架构_第8章 数据模型和DW2.0(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。智能线路图 数据模型是DW2.0必备组成部分。数据模型在很多方面都扮演着通往DW2.0其他部分的只能线路图的角色。在DW2.0中建立线路图有很多种原因,但最...
DW2.0下一代数据仓库架构_第7章 统计处理和DW2.0(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 数据仓库最重要的功能之一是对统计分析的支持。所有行业都使用了统计分析,只是程度不同而已。从终端用户的角度来看,通过统计分析得到的数据从根本上...
DW2.0下一代数据仓库架构_第5章 DW2.0技术基础设置的流动性(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 对于DW2.0架构而言,面临一个最大的挑战是处于一个所采用的技术可以跟业务同样快速变化的环境中。当商业环境发生变化时,就会需要新的类型的信息,而且...
DW2.0下一代数据仓库架构_第4章 DW2.0中的元数据(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0架构中必不可少的组成部分之一是元数据。在第一代数据仓库中不提供或者后来才想到使用元数据,而在DW2.0中,元数据是数据仓库的基石。很多原因使得元...
DW2.0下一代数据仓库架构_第3章 DW2.0组成部分--关于不同区(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0由四个不同的区组成:交互区、整合区、近线区和归档区。一般会根据数据仓库的大小和使用阶段来确定使用哪个区或者不使用哪个区。例如,在数据仓库...
DW2.0下一代数据仓库架构_第2章 DW2.0简介(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 为了理解DW2.0是怎么形成的,考虑一下几个形成因素: 1、在第一代数据仓库中,强调了数据仓库本身的建立和增加商业价值。在第一代数...
DW2.0下一代数据仓库架构_第1章 迁数据仓库简史及第一代数据仓库(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 最早保存数据的机制很简单。串口卡片、纸带、容量很小的磁芯存储器,那时存储器非常昂贵且容量有限。 磁带的发明和使用开...
DW2.0下一代数据仓库架构 前言(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 数据仓库已经问世二十多年,它已经成为信息技术基础设施的基本组成部分。 数据仓库能够为企业提供整合的、粒度的、历史...
DW2.0下一代数据仓库架构_第23章 管理DW2.0环境(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0环境是一个非常复杂的环境,需要很长的时间来构建。DW2.0环境涉及及企业的很多部分:日常操作,管理,战术战略决策甚至是董事会。DW2.0环境也包含...
DW2.0下一代数据仓库架构_第22章 DW2.0环境中的处理(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0环境的显著特点是在不同的区域能找到各种类型的数据。从许多方面说,是数据与区域定义了DW2.0.但是系统架构师的角度而言,DW2.0不仅仅是一个数据...
DW2.0下一代数据仓库架构_第21章 多方面的话题(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 数据集市; 监视DW2.0环境; 将数据从一个数据集市移动到另一个数据集市; 如何处理不合格...
DW2.0下一代数据仓库架构_第20章 DW2.0与记录系统(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0数据仓库中的大部分数据集的建立都是以操作型或旧的应用系统为基础的。写于很多年前并且很多情况下无文档记录,最初的数据就是从这样的操作应用环...
DW2.0下一代数据仓库架构_第19章 DW2.0和非结构化数据(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 据统计,在企业里有80%的数据是非结构化数据。但是当前计算机的技术都是致力于处理结构化、可重复的数据。这导致在企业中做决策时没有利用到一些有价值...
DW2.0下一代数据仓库架构_第17章 成本验证和DW2.0(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 毫无疑问,DW2.0的基础设施需要很大的成本。建立它、运维它都需要成本,所使用的设备也有成本。然而,大部分公司都是反对较大支出。会很自然的被问到“...
DW2.0下一代数据仓库架构_第16章 迁移(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记,欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 DW2.0是一个巨大且复杂的环境,需要利用大量的资源并经过很长的时间建立它。DW2.0环境更像一座城市而不是一座房子。建一座房子需要相对较短的时间,在...
DW2.0下一代数据仓库架构_第15章 DW2.0和性能(读书笔记)
版权声明:该系列文章(DW2.0下一代数据仓库架构)内容系作者学习用笔记, 欢迎共同学习,所载内容版权归原书作(译)者所有,请勿转载商用。 &nb...
hadoop-集群管理(4)——关键属性
hadoop中的配置属性非常多,这里只讨论关键属性,它们分散在3个文件中:core-site.xml、hdfs-site.xml、mapred-site.xml。1. core-site.xml<configuration> <property> <name>fs.default.name</name> <value>hdfs://Route:9000</value> <final>true</final>&n...