全部博文
-
编辑 删除
hadoop2.3 安装配置开发记录(二)
hadoop2.3 配置（一） hadoop的初衷是为了用普通的(commodity)硬件设备搭建强大的分布式文件系统集群，因此集群上的硬件并不需要非常昂贵的硬件设备，例如，小型机、ssd、高端存储等，就是通常所说的"IOE"。但是普通并不意味着低档，因为hadoop的集群通常由成百上千的机器组成，低档意味着增加集群的维护成本。在配置hadoop前，我们需要熟悉几个名词。 1 NameNode NameNode通常需要配置较大的物理内存，这由hadoop的机制所决定的，NameNode会在内存中存储整个HDFS的文件(file)和块(block)的元信息(metadata)。随着集群规模的增大，Na
