-
编辑 删除
HBase调优 | 写入阻塞问题与参数优化
一图胜千言，先来看下HBase数据写入流程：如上图所示，当数据写到服务端时，在持久化到磁盘之前，要经过三个重要过程：追加写WAL日志：数据会首先追加写入到WAL文件，用于故障恢复。写入MemStore：然后写入所属Region的MemStore缓存中，此时客户端写入就算成功了。MemStoreFlu
-
编辑 删除
HBase的组件和功能
文章来源：加米谷大数据HBase是一个高可靠、高性能、面向列、可伸缩的分布式数据库，底层基于Hadoop的HDFS来存储数据。本文将介绍HBase的系统架构以及每个组件的功能。上图展示了HBase的系统架构，包括客户端、ZooKeeper服务器、HMaster主服务器和RegionServer。Re
-
编辑 删除
HBase学习——1.HBase基础
1.HBaseHBase是HadoopDatabase的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，为横向发展类型数据库，提供快速随机访问海量结构化数据，它是Hadoop生态系统，提供对数据的随机实时读/写访问，是Hadoop文件系统的一部分，利用了Hadoop的文件系统(HDFS
-
编辑 删除
如何在优化生产环境的hbase
hbase是hadoop生态圈的一员，在数据服务应用中具有举足轻重的地位，我们当然有必要掌握，hbase日常的大部分应用在数据查询服务中，因此查询的时候必然涉及到scan操作，因此在建表的时候就要对htable进行优化，比如设置块缓存，设置过期时间等，设置保留的版本号，这些为什么如此重要？下面详细说
-
编辑 删除
HBase个人总结
参考文档：详解HBase架构原理-Steven.Chow-博客园Hbase原理、基本概念、基本架构-飞鱼德蒙-博客园05.HBaseWAL解析HBase学习之路（七）HBase原理基本信息：HBase在Hadoop之上提供了类似于Bigtable的能力，实时读写的分布式数据库HBase原理：HBas
-
编辑 删除
大数据面试荟萃(一)
1一句话概括HBaseHBase是一个分布式的、可伸缩的数据存储，其支持行级别的数据更新，快速查询和行级事务（不支持多行事务）。相比Hive，Hive是不支持单行事务的。怎么理解支持行级事务，但是不支持多行事务呢？参考以下博客。HBase数据会首先写入WAL，再写入Memstore。写入Memsto
-
编辑 删除
基于 Docker 构建 Hadoop 平台
基于Docker的Hadoop集群构建0.绪论使用Docker搭建Hadoop技术平台，包括安装Docker、Java、Scala、Hadoop、Hbase、Spark。集群共有5台机器，主机名分别为h01、h02、h03、h04、h05。其中h01为master，其他的为slave。JDK1.8S
-
编辑 删除
问答-HBASE中，region server挂了之后，如何把这台server上的region转移到
作者：用心阁链接：https://www.zhihu.com/question/20130759/answer/35406376来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。集群的组成HBase的运行时有三个集群：Zookeeper集群，负责HBase（当然还有HDF
-
编辑 删除
问答-为什么国内流行hbase，国外反而多用cassandra？
1、cassandra我认为还是更加数据库一些，hbase的流行主要是依赖hadoop生态的发展。2、cassandra在大部分公司是DBA及运维同学维护的，hbase在很多公司是大数据研发团队维护的，大数据研发团队一般有一些源码的能力。DBA及运维同学基本是把cassandra当做类似mysql来
-
编辑 删除
从一无所知到5分钟快速了解HBase
最近公司正好准备投入HBase，因此做了一些基础学习准备，所以先暂时停止MySQL的更新，把HBase的学习心得跟大家分享一下，接下来一段时间都会发布HBase相关内容。在学的过程中，发现跟MySQL相互对比，能更深入地了解存储组件的设计。有任何问题或者想看的知识点，欢迎留言跟我沟通。1.前言随着公
-
编辑 删除
全面认识HBase架构（建议收藏）
在网上看过很多HBaes架构相关的文章，内容深浅不一，直到发现了一篇MapR官网的文章https://mapr.com/blog/in-depth-look-hbase-architecture/#.VdMxvWSqqko，写得实在太shengdong了。因此，以这篇文章作为骨架，翻译了许多原文的内
-
编辑 删除
深入HBase读写
在了解HBase架构的基础上，我们需要进一步学习HBase的读写过程，一方面是了解各个组件在整个读写过程中充当的角色，另一方面只有了解HBase的真实请求过程，才能为后续的正确使用打下初步基础，毕竟，除了会使用api，你还得知道怎么能写得更快，怎么查得更快。1.首次读写的基本过程在上一篇深入HBas
-
编辑 删除
【从零单排HBase】HBase高性能查询揭秘
先给结论吧：HBase利用compaction机制，通过大量的读延迟毛刺和一定的写阻塞，来换取整体上的读取延迟的平稳。1.为什么要compaction在上一篇HBase读写中我们提到了，HBase在读取过程中，会创建多个scanner去抓去数据。其中，会创建多个storefilescanner去lo
-
编辑 删除
【从零单排HBase】HBase高性能查询揭秘
先给结论吧：HBase利用compaction机制，通过大量的读延迟毛刺和一定的写阻塞，来换取整体上的读取延迟的平稳。1.为什么要compaction在上一篇HBase读写中我们提到了，HBase在读取过程中，会创建多个scanner去抓去数据。其中，会创建多个storefilescanner去lo
-
编辑 删除
「从零单排HBase 05」核心特性region split
HBase拥有出色的扩展性，其中最依赖的就是region的自动split机制。1.split触发时机与策略前面我们已经知道了，数据写入过程中，需要先写memstore，然后memstore满了以后，flush写入磁盘，形成新的HFile文件。当HFile文件数量不断累积，Regionserver就会
-
编辑 删除
「从零单排HBase 06」你必须知道的HBase最佳实践
前面，我们已经打下了很多关于HBase的理论基础，今天，我们主要聊聊在实际开发使用HBase中，需要关注的一些最佳实践经验。1.Schema设计七大原则1）每个region的大小应该控制在10G到50G之间；2）一个表最好保持在50到100个region的规模；3）每个cell最大不应该超过10MB
-
编辑 删除
如何正确管理HBase的连接，从原理到实战
本文将介绍HBase的客户端连接实现，并说明如何正确管理HBase的连接。最近在搭建一个HBase的可视化管理平台，搭建完成后发现不管什么查询都很慢，甚至于使用api去listTable都要好几秒。经过一番排查发现，是每次请求的时候，都去临时创建了一个connection，而创建connection
-
编辑 删除
HBase可用性分析与高可用实践
HBase作为一个分布式存储的数据库，它是如何保证可用性的呢？对于分布式系统的CAP问题，它是如何权衡的呢？最重要的是，我们在生产实践中，又应该如何保证HBase服务的高可用呢？下面我们来仔细分析一下。1.什么是分布式系统的CAP？CAP是指一致性（Consistency）、可用性（Availabi
-
编辑 删除
「从零单排HBase 09」Hbase的那些数据结构和算法
在之前学习MySQL的时候，我们知道存储引擎常用的索引结构有B+树索引和哈希索引。而对HBase的学习，也离不开索引结构的学习，它使用了一种LSM树（(Log-StructuredMerge-Tree)）的索引结构。下面，我们就结合HBase的实现，来深入了解HBase的核心数据结构与算法，包括索引
-
编辑 删除
问答-HBase为什么火？它适用于那些业务场景？
作者：向磊链接：https://www.zhihu.com/question/39859266/answer/83676259来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。纠正一个理解错误，hbase不是oltp，作为一个NoSQL，他顶多是olp,没有transac
