arm麒麟环境安装hbase
1、下载安装包,并上传服务器2、创建安装目录,并解压安装包[root@node2 ~]# mkdir /usr/local/hbase [root@node2 ~]# tat -zxf hbase-1.2.0-cdh5.16.2-arm64.tar.gz -C /usr/local/hbase3、修改配置文
arm麒麟环境安装hadoop
1、下载安装包,并上传服务器2、创建安装目录,并解压安装包[root@node2 ~]# mkdir /usr/local/hadoop [root@node2 ~]# tar -zxf hadoop-3.1.1-arm64.tar.gz -C /usr/local/hadoop3、修改配置文件[root@
arm麒麟环境安装zookeeper
1、下载安装包,上传导服务器2、创建安装目录,并解压[root@node2 ~]# mkdir /usr/local/zookeeper [root@node2 ~]# tar -zxf zookeeper-3.5.5-arm64.tar.gz -C /usr/local/zookeeper/3、修改配置参
trafodion访问hive orc 行组索引性能情况
在之前的博客介绍了不同方式将textfile的hive表数据加载到orc表中,本篇介绍不同数据加载方式,对trafodion访问orc表的性能影响; hive orc表数据加载:http://blog.itpu
hive reduce数量计算
hive客户端数据加载的时候,hdfs底层有多少个数据文件和reduce个数有关 set mapred.reduce.tasks = -1
hive ORC表数据插入
hive ORC表数据插入 hive order by、sort by、distribute by、cluster by相关区别 reduce数量计算 trafodion访问hive表进行orc表数据加载
hive orc表'orc.create.index'='true'与'orc.create.index'='false'
hive ORC文件存储格式是以列存的方式,在查询表中少数列数据,不必要去查询没条数据的所有字段;但是如果一个列的值全部存储一起,查询一个列的一条数据,会将整个表该列的所有数据都查询出来,如果数据量很大,查询速度依然很慢;然后引入orc.create.index(行组索引),行组索引就能解决以上的问题;概念解释:行组索引:如下图: &nbs
EsgynDB之Bulkload
EsgynDB之Bulkload详解
热点数据加载出现Trying to load more than 32 hfiles to one family of one region
EsgynDB加载出现Trying to load more than 32 hfiles to one family of one region问题解决
EsgynDB/QianBase如何选择用某一列作为salt键
在EsgynDB、QianBase处理大数据量的表情况下,一般会指定salt建创建表结构,并按照该键值的UEC情况将数据分布在各个节点上; 查询的时候,SQL执行引擎会根据salt的列存储的各种值并发扫描或者定
EsgynDB / trafodion 手动添加多租户功能
在某移动某平台上,存储hbase权限有限,属于一个集群c1,EsgynDB/trafodion属于另外一个集群c2,集群c1作为集群c2的存储引擎,这个环境下,EsgynDB/trafodion添加多租户功能,不能以重新安装EsgynDB/trafodion的方式解决,需要手动添加多租户功能; 
EsgynDB 监控工具OM安装指定多租户
OM是EsgynDB QianBase的一个基于web的图形监控工具及图形数据库操作工具,默认情况下OM安装时不带多租户的,需要设置enableMT为true,然后安装OM,OM界面才带有多租户的功能;1、修改配置文件[root@node3 OM_HAInstalle]# vi om-chart/values.yaml
HDP安装提示:Operation not permitted: '/boot/efi/hadoop/hdfs/namenode'
【问题描述】 ARM麒麟环境中,在ambari安装HDP,在Install, Start and Test步骤时提示:OSError: [Errno 1] Operation not permitted: '/boot/efi/hadoop/hdfs/namenode'stderr: /usr/lib/ambari
EsgynDB 查询提示:ERROR[2006] Internal error: assertion failure ...
【问题描述】 在EsgynDB中,查询时提示:*** ERROR[2006] Internal error: assertion failure (result_type) in file ../generator/GenPreCode.cpp at line 10305.SQL>SELECT pro.fid,pro.fcode