首页 > 数据库 > SQL on Hadoop
学会SQL在职场上到底能干哪些工作?
为什么SQL受到企业的高度重视?因为SQL能够与大多数现代技术都兼容,简化了数据收集、存储和信息检索过程,同时允许数据库在多台计算机上运行,从而提高了其在工作场所的可用性。很多企业都需要利用SQL提取信息,用于以数据为中心的分析、数据库升级和维护。 具体来说,学会SQL后,在职场上能干哪些工作呢?这篇文章告诉大家。
【分布式存储数据恢复】hbase和hive数据库底层文件误删的数据恢复案例
分布式存储数据恢复环境: 16台物理服务器,每台物理服务器上有数台虚拟机; 虚拟机上配置分布式,上层部署hbase数据库和hive数据库。 分布式存储故障&分析: 误删除数据库底层文件,数据库不能使用。需要恢复hbase和hive数据库。 通过现场对用户环境的检测,数据恢复工程师发现虚拟机还可以正常启动,虚拟机上的数据库块文件丢失。块文件丢失之后没有新的数据写入操作,底层的数据损坏可能性比较小。
关于 SAP HANA 数据库的死锁问题(deadlock)
一个朋友在我的知识星球里提问: hana数据库发生死锁后,会自动解开吗?还是会等着自动超时后报错。 笔者在 15 年的 SAP 开发生涯中对 HANA 数据库接触得比较少,这里只能根据网络上搜索出的一些材料来回答。 首先,如果是 ABAP 服务器,当 SQL 语句执行时出现死锁,会立即出现运行时异常,终止当前程序的执行: 关于 ABAP 死锁的介绍,参考笔者这篇文章:ABA
分布式数据库 ZNBase 的分布式计划生成
分布式数据库 ZNBase 的分布式计划生成 导读 在数据库系统中,收到一个查询请求时,执行器会负责解析 SQL 语句,生成执行计划,然后再一步步实现我们的查询请求。分布式数据库拥有分布式执行计划,与传统单机数据库相比拥有更高的扩展性。本文将介绍 NewSQL 分布式数据库 ZNBase 的分布式计划生成机制。 数据库的服务端,可以划分为执行器 (Execution Engine) 和存
海外常见的http错误代码原因与解决
一些常见的状态码为:200 - 服务器成功返回网页404 - 请求的网页不存在503 - 服务不可用详细分解:1xx(临时响应)表示临时响应并需要请求者继续执行操作的状态代码。代码 说明100 (继续) 请求者应当继续提出请求。服务器返回此代码表示已收到请求的第一部分,正在等待其余部分。101 (切换协议) 请求者已要求服务器切换协议,服务器已确认并准备切换。2xx (成功)表示成功处理了请求的状
【北亚数据恢复】分布式存储hbase和hive数据库底层文件被误删除的数据恢复案例
分布式存储环境: Dell PowerEdge机架式服务器; 数据库类型:Hbase、Hive; 16台物理服务器。 故障: 16台服务器节点,在每台物理服务器上平均有3台虚拟机,在虚拟机上配置分布式,上层部署的hbase数据库和hive数据库。数据库底层文件被误删除,导致数据库不可用。管理员联系北亚数据恢复中心恢复hbase和hive数据库的数据。
大电流电感的案例和性能gujing
编辑:谷景电子随着现在科学技术的不断发展、进步、创新,电感元器件被应用的行业也越来越多,国产电感行业逐步崭露头角,并取得重要突破与成就,为适应产品的需要电感类型也越来越多,今天咱们结合案例来了解一下大电流一体成型电感案例和性能。几年前开始北京那边通过网络询盘来了一个客户,直接就问我们一体成型电感能不能生产,最大的电流是多大,经过一系列的交流,我们了解到客户是制造轨道交通的,在给我产品参数要求,对客
多看看,可以的
原来看过不知道为何不能。
arm麒麟环境安装hbase
1、下载安装包,并上传服务器2、创建安装目录,并解压安装包[root@node2 ~]# mkdir /usr/local/hbase [root@node2 ~]# tat -zxf hbase-1.2.0-cdh5.16.2-arm64.tar.gz -C /usr/local/hbase3、修改配置文
arm麒麟环境安装hadoop
1、下载安装包,并上传服务器2、创建安装目录,并解压安装包[root@node2 ~]# mkdir /usr/local/hadoop [root@node2 ~]# tar -zxf hadoop-3.1.1-arm64.tar.gz -C /usr/local/hadoop3、修改配置文件[root@
arm麒麟环境安装zookeeper
1、下载安装包,上传导服务器2、创建安装目录,并解压[root@node2 ~]# mkdir /usr/local/zookeeper [root@node2 ~]# tar -zxf zookeeper-3.5.5-arm64.tar.gz -C /usr/local/zookeeper/3、修改配置参
trafodion访问hive orc 行组索引性能情况
在之前的博客介绍了不同方式将textfile的hive表数据加载到orc表中,本篇介绍不同数据加载方式,对trafodion访问orc表的性能影响; hive orc表数据加载:http://blog.itpu
hive reduce数量计算
hive客户端数据加载的时候,hdfs底层有多少个数据文件和reduce个数有关 set mapred.reduce.tasks = -1
hive ORC表数据插入
hive ORC表数据插入 hive order by、sort by、distribute by、cluster by相关区别 reduce数量计算 trafodion访问hive表进行orc表数据加载
hive orc表'orc.create.index'='true'与'orc.create.index'='false'
hive ORC文件存储格式是以列存的方式,在查询表中少数列数据,不必要去查询没条数据的所有字段;但是如果一个列的值全部存储一起,查询一个列的一条数据,会将整个表该列的所有数据都查询出来,如果数据量很大,查询速度依然很慢;然后引入orc.create.index(行组索引),行组索引就能解决以上的问题;概念解释:行组索引:如下图: &nbs
EsgynDB/QianBase如何选择用某一列作为salt键
在EsgynDB、QianBase处理大数据量的表情况下,一般会指定salt建创建表结构,并按照该键值的UEC情况将数据分布在各个节点上; 查询的时候,SQL执行引擎会根据salt的列存储的各种值并发扫描或者定
EsgynDB / trafodion 手动添加多租户功能
在某移动某平台上,存储hbase权限有限,属于一个集群c1,EsgynDB/trafodion属于另外一个集群c2,集群c1作为集群c2的存储引擎,这个环境下,EsgynDB/trafodion添加多租户功能,不能以重新安装EsgynDB/trafodion的方式解决,需要手动添加多租户功能; 
EsgynDB 监控工具OM安装指定多租户
OM是EsgynDB QianBase的一个基于web的图形监控工具及图形数据库操作工具,默认情况下OM安装时不带多租户的,需要设置enableMT为true,然后安装OM,OM界面才带有多租户的功能;1、修改配置文件[root@node3 OM_HAInstalle]# vi om-chart/values.yaml
EsgynDB 查询提示:ERROR[2006] Internal error: assertion failure ...
【问题描述】 在EsgynDB中,查询时提示:*** ERROR[2006] Internal error: assertion failure (result_type) in file ../generator/GenPreCode.cpp at line 10305.SQL>SELECT pro.fid,pro.fcode
EsgynDB通过系统表安装字段顺序获取字段名称
在分布式数据库EsgynDB中,如果我们需要表的字段名称,并按照字段顺序获取,即与建表语句的字段顺序相同,可通过系统表进行查询;object_name:指定表名称,eg:JTK_XXcolumn_name:指定列名称;column_number:指定字段的顺序,按照该字段asc排序即为字段顺序;SELECT &n