-
编辑 删除
Hadoop的namenode无法启动问题（50070无法访问，50030可以访问）
[java] view plaincopy2013-08-31 10:29:31,241 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.java.io.FileNotFoundException: /opt/data/hadoop/hdfs/name/current/VERSION ...
-
编辑 删除
快速搭建 Hadoop环境
对于Hadoop来说，最主要的是两个方面，一个是分布式文件系统HDFS，另一个是MapReduce计算模型，下面讲解下我在搭建Hadoop 环境过程。Hadoop 测试环境共4台测试机，1台namenode 3台datanode OS版本：RHEL 5.5 X86_64 Hadoop：0.20.203.0 ...
-
编辑 删除
hadoop搭建与eclipse开发环境设置
1. Windows下eclipse开发环境配置1.1 安装开发hadoop插件 将hadoop安装包hadoop\contrib\eclipse-plugin\hadoop-0.20.2-eclipse-plugin.jar拷贝到eclipse的插件目录plugins下。 需要注意的是插件版本（及后面开发导入的所有jar包...
-
编辑 删除
Hadoop编程调用HDFS
Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始，中国进入大数据风起云涌的时代，以Hadoop为代表的家族...
-
编辑 删除
sqoop与oracle交互
首先把 odbj14.jar copy 到 SQOOP_HOME/lib目录下可以使用sqoop help 查看sqoop命令列出oralce10g mytest用户下的所有表，用户名要大写，小写什么也不显示sqoop ?list-tables --connect "jdbc:oracle:thin:@192.168.168.10:1521:orcl" --username mytest --password mytest使用sqoop 将表DEPT导入到HDFS中...
-
编辑 删除
Sqoop安装及验证
环境：系统Red hat linux 6.4Hadoop版本1.2.1Sqoop版本1.4.4Mysql数据库版本5.6.15...
-
编辑 删除
win下使用maven+eclipse构建HAOOP环境,运行控制台报"文件权限"错，解决办法
win下使用maven+eclipse构建 虚拟机 HAOOP环境 运行控制台报"文件权限"错 2014-9-30 14:25:02 org.apache.hadoop.util.NativeCodeLoader 警告: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable2013-9-30 19:25:02 org.apache.hadoop.security.UserGroupInforma...
-
编辑 删除
快速搭建 Hadoop 环境
对于Hadoop来说，最主要的是两个方面，一个是分布式文件系统HDFS，另一个是MapReduce计算模型，下面讲解下我在搭建Hadoop 环境过程。Hadoop 测试环境共4台测试机，1台namenode 3台datanode OS版本：RHEL 5.5 X86_64 ...
-
编辑 删除
hadoop，hbase，hive安装过程
操作系统：CentOS 5.5Hadoop：hadoop-0.20.203.0jdk1.7.0_01namenode主机名:master，namenode的IP:10.10.102.15datanode主机名:slave1，datanode的IP:10.10.106.8datanode主机名:slave2，datanode的IP:10.10.106.9一、hadoop 安装1、建立用户useradd hadooppasswd hadoop2. 安装 JDK * 先查看是否安装了j...
