-
HBase Region 自动拆分策略
HBase Region 自动拆分策略原文链接： https://cloud.tencent.com/developer/article/13745922018-12-19阅读 1.7K0HBase-2.x支持7种Region自动拆分Region的策略，类图如下:其中BusyRegionSplitPolicy是HBase-2.x新增的策略，其他6种在HBase-1.
-
25Cr2MoVA 对比 25Cr2Mo1VA
其实没有优劣，只看哪种材料最适合你。我们对25Cr2MoVA钢,25Cr2Mo1VA钢和40Cr钢进行了高周疲劳试验,基于无疲劳极限半对数曲线模型拟合得到了三种钢的P-S-N曲线,并分析了疲劳断口形貌.
-
好程序员大数据培训分享Hadoop入门进阶
好程序员大数据培训分享Hadoop入门进阶，凡事只有入门后才能了解更多，技术更是如此，大数据开发技术也是只有入门后才能更好的深入探究，本篇文章好程序员大数据培训小编和大家分析Hadoop的入门进阶，对大数据开发感兴趣的小伙伴就随着小编一起来了解一下吧。 Hadoop是什么? Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架，实现在大量
-
Hbase split的三种方式和split的过程
Hbase split的三种方式和split的过程原文: https://www.cnblogs.com/niurougan/p/3976519.html在Hbase中split是一个很重要的功能，Hbase是通过把数据分配到一定数量的region来达到负载均衡的。一个table会被分配到一个或多个region中，这些region会被分配到一个或者多个regionServer中。在自动split策
-
Hadoop大数据实战系列文章之Hive
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的 sql 查询功能，Hive 定义了简单的类 SQL 查询语言，称为 HQL，它允许熟悉 SQL 的用户查询数据可以将 sql语句转换为MapReduce任务进行运行，不必开发专门的 MapReduce。毕竟会写 SQL 的人比写 JAVA 的人多，这样可以让一大批运营人员直接获取海量数据。在数据仓
-
Hadoop大数据实战系列文章之HBase
HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用 HBase 技术可在廉价 PC Server 上搭建起大规模结构化存储集群。本章内容：1) Hbase 简介2) Hbase 数据模型3) Hbase 基础原理4) Hbase 系统架构5) Hbase 基础操作1. Hbase 简介HBase 是 Apache Hadoop 中的一个子项
-
Hadoop大数据实战系列文章之Mapreduce 计算框架
如果将Hadoop比做一头大象，那么MapReduce就是那头大象的电脑。MapReduce是 Hadoop 核心编程模型。在 Hadoop 中，数据处理核心就是 MapReduce 程序设计模型。本章内容：1) MapReduce 编程模型2) MapReduce 执行流程3) MapReduce 数据本地化4) MapReduce 工作原理5) MapReduce 错误处理机制1. MapRe
-
Hadoop大数据实战系列文章之Zookeeper
Zookeeper 是一种分布式的，开源的，应用于分布式应用的协作服务。它提供了一些简单的操作，使得分布式应用可以基于这些接口实现诸如同步、配置维护和分集群或者命名的服务。Zookeeper 很容易编程接入，它使用了一个和文件树结构相似的数据模型。可以使用 Java 或者 C 来进行编程接入。众所周知，分布式的系统协作服务很难有让人满意的产品。这些协作服务产品很容易陷入一些诸如竞争选择条件或者死锁
-
“开源软件供应链点亮计划-暑期2020”公布结果 基于ChubaoFS开发的项目获得最佳质量奖
ChubaoFS是京东自研的云原生存储平台，提供分布式文件系统与对象存储服务，为云原生应用提供计算与存储分离的持久化存储方案。ChubaoFS 最早于 2017 年在京东内部创建，设计的最初目的是为京东的大型容器集群提供持久化存储的解决方案，同时还可以用作业务端的通用存储。经过长期内部孵化与实践验证，京东将 ChubaoFS 开源捐献给 CNCF，并被 CNCF Storage SIG 工作组列入 Cloud Native Landscape 项目。
-
Hadoop大数据实战系列文章之HDFS文件系统
Hadoop 附带了一个名为 HDFS(Hadoop分布式文件系统)的分布式文件系统，专门存储超大数据文件，为整个 Hadoop 生态圈提供了基础的存储服务。本章内容：1) HDFS 文件系统的特点，以及不适用的场景2) HDFS 文件系统重点知识点：体系架构和数据读写流程3) 关于操作 HDFS 文件系统的一些基本用户命令1. HDFS 特点 ：HDFS 专为解决大数据存储问题而产生的，其具备了
-
好程序员大数据培训分享常见的Hadoop和Spark项目
好程序员大数据培训分享常见的Hadoop和Spark项目，如果有正在做项目的小伙伴可以了解一下，下面我们一块来看一下具体的内容。 有一句古老的格言是这样说的，如果你向某人提供你的全部支持和金融支持去做一些不同的和创新的事情，他们最终却会做别人正在做的事情。如比较火爆的Hadoop、Spark和Storm，每个人都认为他们正在做一些与这些新的大数据技术相关的事情，但它不需要很长的时间遇到相同的
-
如何学习Hadoop
如何学习Hadoop，如何学习Hadoop，对大数据开发感兴趣的小伙伴就随着小编一起来了解一下吧。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System)，简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据，适合那些有着超大数据集(l
-
好程序员大数据培训分享Hadoop的shuffle过程
好程序员大数据培训分享Hadoop的shuffle过程，对大数据感兴趣想要学习或者是想要加入到大数据行业的小伙伴们就随小编一起来看一下吧。 Hadoop的shuffle过程就是从map端输出到reduce端输入之间的过程，这一段应该是Hadoop中最核心的部分，因为涉及到Hadoop中最珍贵的网络资源，所以shuffle过程中会有很多可以调节的参数，也有很多策略可以研究。这里没有对shuff
-
Hadoop大数据实战系列文章之安装Hadoop
由于实践部分主要以 Hadoop 1.0 环境为主，所以这主要介绍如何搭建 Hadoop 1.0分布式环境。整个分布式环境运行在带有linux操作系统的虚拟机上，至于虚拟机和linux系统的安装这里暂不做过多介绍。安装 Hadoop 分布式环境：1) 下载 Hadoop 安装包：在http://pan.baidu.com/s/1qXSN3hM地址中可以找到hadoop-1.2.1-bin.tar.
-
Hadoop大数据实战系列文章之Hadoop介绍
Hadoop 是一个由 Apache 基金会所开发的开源分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进行高速运算和存储。解决了大数据（大到一台计算机无法进行存储，一台计算机无法在要求的时间内进行处理）的可靠存储和处理。适合处理非结构化数据，包括 HDFS，MapReduce 基本组件。1 Hadoop 版本 衍化 历史 &nb
-
MR多输入
MR多输入，MultipleInputFormat
-
MR 博客记录
MapReduce过程详细说明
-
好程序员大数据培训分享Hadoop技术优缺点
好程序员大数据培训分享Hadoop技术优缺点，目前我们正被数据包围，全球43亿部电话、20亿位互联网用户每秒都在不断地产生大量数据，人们发送短信给朋友、上传视频、用手机拍照、更新社交网站的信息、转发微博、点击广告等，使得机器产生和保留了越来越多的数据。数据的指数级增长对处于市场领导地位的互联网公司，它们需要对TB级别和PB级别的数据进行分析处理，以发现哪些网站更受欢迎，哪些商品更具有吸引力，哪
-
Zookeeper启动提示：Unable to load database on disk
【问题描述】 Zookeeper所在节点磁盘满了，导致当前节点Zookeeper宕机，然后当释放磁盘后，启动Zookeeper时显示Zookeeper无法启动，报错信息如下：2020-09-03 20:03:30,999 ERROR org.apache.zookeeper.
-
HBase提示：Too many open files
【问题描述】 重启Hadoop后，HBase Master过了一会儿自动Down掉，RegionServer显示正常；HBase Master日志有较多报错"java.net.SocketException: Too many open files； &nb
