全部博文
-
编辑 删除
大数据处理平台的基础架构
包含6个主要的基本能力组件：数据集成、文件存储、数据存储、数据计算、数据分析、平台管理。 文件存储组件是数据处理架构中进行数据管理的基本单元，其功能是提供快速、可靠的文件访问能力，以满足大数据量计算的需求。 数据存储能力是数据处理架构中进行数据管理的高级单元，其功能是存储按照特定的数据模型组织起来的数据集合，并提供独立于应用的数据增加、删除、修改能力， 例如IBM的DB2就是一个数据存储能力组件。 数据集成组件的功能是将不同来源、不同格式、不同性质的数据在逻辑上或物理上进行有机集中，以支持多样数据源与
