Amazon EC2平台Hadoop集群搭建
最近需要在EC2平台上用Hadoop上完成一些作业和项目,网上中文资料几乎没有关于EC2平台的Hadoop的配置,英文资料里各个关键点又十分分散,花了不少时间才完成,因此总结一下整个配置流程,也算是给自己加深一下印象。 1. 前期准备 在EC2控制台上新建3个instance,可分别命名为master,slave1和slave2 ,其中master将作为namenode和jobtracker ,slave1 和 slave2 将作为datanode和tasktracker。(本例采用free-tire的ubuntu 12.10 服务器)。 选中一个服务器,在页面下半部会出现instantce的外部dns地址,用来远程访问,