【Hadoop深度探索二】Hadoop3.0.0-alpha2版本概述
1,最小需要Java8版本2,HDFS支持纠删码(erasure encoding)3,引入YARN时间服务v.24,重写shell脚本5,Shaded client jars6,支持Opportunistic Containers和分布式任务7,MapReduce任务级本地优化8,支持两个以上的NameNodes.9,多个服务的默认端口被改变10,支持Microsoft Azure Data Lake和阿里对你存储系统文...
【Hadoop深度探索一】初识hadoop
Apache Hadoop工程已发展成一个可靠的(reliable),轻量的(scalable),分布式计算(distributed computing)的开源软件。 Apach Hadoop软件库是一个允许用简单的程序模型对大数据集进行跨计算机群集的分布式处理的框架。它的目的(designed to)在于将计算能力从单个服...