Hadoop计算平台和Hadoop数据仓库的区别
我们知道目前Apache Hadoop广泛应用于云计算平台中,实现海量数据的分析处理,如典型的日志分析等,而且基于Hadoop的个种子项目非常多,包括chukwa, MapReduce, ZooKeeper等等。事实上Hadoop也早已被应用于数...
[ 转载 ] HBASE启动脚本/Shell解析
常用到的HBase启动脚本有: 1.$HBASE_HOME/bin/start-hbase.sh 启动整个集群 2.$HBASE_HOME/bin/stop-hbase.sh 停止整个集群 3.$HBASE_HOME/bin/hbase-daemons.sh 启动或停止,所有的regionserver或zookeeper或backu...
Hadoop集群(第10期副刊)_常用MySQL数据库命令
Hadoop集群(第10期副刊)_常用MySQL数据库命令 1、系统管理1.1 连接MySQL 格式: mysql -h主机地址 -u用户名 -p用户密码 举例: 例1:连接到本机上的MySQL。 首先在打开DOS窗口,然后进入目...
Hadoop集群(第10期)_MySQL关系数据库
Hadoop集群(第10期)_MySQL关系数据库 1、MySQL安装 MySQL下载地址:http://www.mysql.com/downloads/1.1 Windows平台 1)准备软件 MySQL版本:mysql-5.5.21-win32.msi 2)安...
Hadoop集群(第9期)_MapReduce初级案例
Hadoop集群(第9期)_MapReduce初级案例 1、数据去重 "数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任...
Hadoop集群(第7期)_Eclipse开发环境设置
Hadoop集群(第7期)_Eclipse开发环境设置 1、Hadoop开发环境简介1.1 Hadoop集群简介 Java版本:jdk-6u31-linux-i586.bin Linux系统:CentOS6.0 Hadoop版本:hadoop-1.0.0.tar.gz 1.2 Windows开发...
Hadoop集群(第6期)_WordCount运行详解
Hadoop集群(第6期)_WordCount运行详解 1、MapReduce理论简介 1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成...
Hadoop集群(第5期副刊)_JDK和SSH无密码配置
Hadoop集群(第5期副刊)_JDK和SSH无密码配置 1、Linux配置java环境变量 1.1 原文出处 地址:http://blog.csdn.net/jiedushi/article/details/6672894 1.2 解压安装jdk...
Hadoop集群(第5期)_Hadoop安装配置
Hadoop集群(第5期)_Hadoop安装配置 1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Fi...
Hadoop集群(第4期)_SecureCRT使用
Hadoop集群(第4期)_SecureCRT使用 1、SecureCRT简介 SecureCRT是一款支持SSH(SSH1和SSH2)的终端仿真程序,同时支持Telnet和rlogin协议。SecureCRT是一款用于连接运行包括Windows、UNIX和V...
Hadoop集群(第2期)_机器信息分布表
Hadoop集群(第2期)_机器信息分布表 1、分布式环境搭建 采用4台安装Linux环境的机器来构建一个小规模的分布式集群。图1 集群的架构 其中有一台机器是Master节点,即名称节点,另外三台是Slave...
生产环境Hadoop大集群完全分布式模式安装 NFS+DNS+awk
介绍 这是利用Vmware9.0在一台服务器上搭建的分布式环境,操作系统CentOS 6.4 X64中配置Hadoop-1.0.4时的总结文档。 Hadoop配置建议所有配置文件中使用主机名进...