全部博文
-
编辑 删除
关于hadoop和基于hadoop的nutch搜索引擎的配置（后续更新）
最近，跟同事研究了一下，hadoop和nutch，现在是这样的，nutch在单server上运行，没有问题，可以抓取搜索；hadoop的假设也没有问题，但是nutch搬到hadoop上的过程中出现一些问题，这待后续解决吧。nutch的单机配置可以参考我以前的博客。 1 首先是关于hadoop的配置（ubuntu） sun1 10.112.119.185 作为namenode sun2 10.112.117.52 作为datanode 修改/etc/hosts文件，配置主机名称，为了在后面可以直接通过主机名 1）ssh 安装ssh的过程pass 此处，此处采用授权key的的方式进行互访，
