Hbase手工dumping和splitting WAL
Hbase手工dumping和splitting WAL
Hbase异常宕机,NoServerForRegionException: Unable to find region(2)
Hbase异常宕机,NoServerForRegionException: Unable to find region(2)
Hbase异常宕机,NoServerForRegionException: Unable to find region(1)
Hbase异常宕机,只有ROOT表,META元数据表和自己创建的mytab、test表都没了,报错org.apache.hadoop.hbase.NotServingRegionException: Region is not online
Hbase spilt(1)
Hbase spilt(1)
ERROR: org.apache.hadoop.hbase.client.NoServerForRegionException
ERROR: org.apache.hadoop.hbase.client.NoServerForRegionException
Hive安装
Hive安装
ERROR: org.apache.hadoop.hbase.PleaseHoldException: Master is initializing
ERROR: org.apache.hadoop.hbase.PleaseHoldException
Hadoop-append分支源码编译
Hadoop-append分支源码编译
sqoop将hive中的数据导入mysql
hive 数据通过sqoop 将增量数据导入mysql<br /><br /><h1>查看hive表结构</h1><div id="codeText" class="codeText"><ol style="margin:0 1px 0 0;padding:5px 0pt;" start="1" class="dp-css none_number"><li><span style="color:#000000;">hive<span style="color:#0000CC;">></span> desc hbase_visi...
zookeeper文件myid配置错误,报Session 0x0 for server null, unexpected error
zookeeper文件myid配置错误,报Session 0x0 for server null, unexpected error
Protocol org.apache.hadoop.hdfs.protocol.ClientProtocol version mismatch
Protocol org.apache.hadoop.hdfs.protocol.ClientProtocol version mismatch
CDH cloudera manager
<div class="Blog_wz1" style="font-size:16px;"><h1 style="margin:17pt 0cm 16.5pt;padding:0px;"><span lang="EN-US">1</span>、准备工作:</h1><h2 style="margin:13pt 0cm;padding:0px;"><a name="_Toc425349818"></a><span lang="EN-US">1.1 </span>防火墙关闭,<span lang="EN-US">ip</span>地址修...
sqoop
<h1 style="margin:17pt 0cm 16.5pt;padding:0px;color:#666666;font-family:宋体, Arial;line-height:26px;white-space:normal;background-color:#FFFFFF;"><span lang="EN-US"><span style="font-family:Calibri;">3. Sqoop</span></span></h1><span style="color:#666666;font-size:16px;line-height:26px;white-spa...
学习HBASE
2.安装配置2.1规划
MapReduce源码分析总结(R1)
参考:1 caibinbupt的源代码分析http://caibinbupt.javaeye.com/2 coderplay的avaeyehttp://coderplay.javaeye.com/blog/295097http://coderplay.javaeye.com/blog/3186023 Javen-Studio 咖啡小屋http://www.cppblog.com/javenstudio/articles/43073.html一 MapReduce概述Map/Reduce是一...
Map-Reduce的过程解析(R1)
一、客户端Map-Reduce的过程首先是由客户端提交一个任务开始的。提交任务主要是通过JobClient.runJob(JobConf)静态函数实现的:public static RunningJob runJob(JobConf job) throws IOException { //首先生成一个JobClient对象 JobClient j...
hive大数据倾斜总结
1数据倾斜的原因1.1操作:关键词情形后果Join其中一个表较小,但是key集中分发到某一个或几个Reduc...
开发一个mapreduce程序
<p><span style="font-family:微软雅黑;font-size:10.5pt;line-height:1.5;">整个项目以</span><span style="font-family:微软雅黑;font-size:10.5pt;line-height:1.5;">hadoop</span><span style="font-family:微软雅黑;font-size:10.5pt;line-height:1.5;">自带的</span><span style="font-family:微软雅黑;font-size:1...
hadoop2.6 HA集群安装配置
.说明:1) 在hadoop2.0中通常由两个namenode组成,一个处于active状态,另一个处于standby状态。active namenode对外提供服务,而standby namenode则不对外提供服务,仅同步active namenode的状态,以便能够在它失败的快速进行切换。hadoop2.0提供两种hdfs ha的解决方案,一种是nfs,另一种是qjm。这里使用的是qjm。主备namenode之间通过一组journalnode同步元数据信息,一条数据只要成功写入多数journalnode即认为写入成功。通常配置奇数个journalnode。这里还配置了一个zookeeper集群,用于zkfc(DFSZKFailoverController)故障转移,当active namenode挂掉,会自动切换standby namenode为active状态。2) hadoop2.2.0中依然存在resourcemanager的单点故障问题,在hadoop2.4.1中解决了这个问题。有两个resourcemanger,一个是active,一个standby,状
国外、国内Hadoop的应用现状
国外、国内Hadoop的应用现状