Doris(原Palo)简介
写在前面Doris由百度大数据部研发,之前叫百度Palo,2018年贡献到Apache社区后,更名为Doris。本博客主要从业务角度(我们为什么会选择使用它,如何用)来对Doris进行简要介绍。1、Doris简介Doris是一个MPP的OLAP系统,以较低的成本提供在大数据集上的高性能分析和报表查询
Tajo介绍
目录产品简介产品特点产品简介ApacheTajo是用于ApacheHadoop的强大的大数据关系和分布式数据仓库系统。Tajo专为存储在HDFS(Hadoop分布式文件系统)和其他数据源上的大型数据集上的低延迟和可扩展的ad-hoc查询、在线聚合和ETL(提取-转换-加载过程)而设计。通过支持SQL
SQL.JS介绍
目录产品简介所属公司相关资料产品简介sql.js是一个JavaScriptSQL数据库。它允许您创建一个关系数据库并完全在浏览器中查询它。您可以在此在线演示中试用。它使用存储在内存中的虚拟数据库文件,因此不会持久化对数据库所做的更改。但是,它允许您导入任何现有的sqlite文件,并将创建的数据库导出
【2022/6/9】ITPUB新闻早报
今日热点:1、中国信通院推出手机号“一键解绑”,覆盖微博淘宝抖音美团等6月8日,工信部直属科研事业单位中国信息通信研究院上线了手机号“一键查询”与“一键解绑”服务,可以查询手机号注册的互联网账户情况,并提供微博、淘宝、抖音和美团等解绑服务。中国信通院在“号码绑定”的服务声明中表示,号码绑定“一键查询
Greenplum 数据同步方案
一、目的当前现有服务器状态为同机房两套Greenplum集群,节点数为2+4。为满足未来灾备中心建设,需要构架高可用架构方案,以满足未来在生产系统集群出现不可恢复状态下,备用集群可以完全接管生产系统集群,以实现高可用架构。二、方案目前方案分为以下两种,一种为数据实时同步高可用方案,一种为允许数据同步
Greenplum Segment 的检测机制
Greenplum集群具有较好的容错性和高可用性,其中一点就体现在segment镜像机制上。接下来本文会简单地阐述segment的作用以及segment镜像机制是如何保证GP高可用的。Segment简介Greenplum集群由一个Master和多个segment组成segment用来存储数据一台机器
greenplum资源队列
1、创建资源队列语法Command:CREATERESOURCEQUEUEDescription:createanewresourcequeueforworkloadmanagementSyntax:CREATERESOURCEQUEUEnameWITH(queue_attribute=value[
Greenplum常用SQL查询
抽空网上收罗Greenplum常用SQL查询语句整理备忘。欢迎各位留言补充。都是SQL命令以及数据字典的使用。熟悉数据字典非常重要。三个重要的schema:pg_catalog,pg_toolkit,information_schema,其中information_schema中的数据字典都在视图中
Greenplum数据库优化技巧与实践.pdf
Greenplum分区表查询
分区表相关数据字典和视图pg_partitionpg_partition_rulepg_classpg_partition_columns系统视图被用来显示一个分区表的分区键列;--列出所有分区表对应的分区键信息select*frompg_partition_columns;pg_partition
Greenplum主键和序列的使用
主键和唯一键限制主键约束是唯一约束和非空约束的组合。GP数据库为每个unique或primarykey约束自动创建unique索引来强制执行唯一性。因此,无需为主键列显式创建索引。Appendonly追加表不支持主键和唯一键约束在追加优化表上不允许使用unique和primarykey约束,因为由约
Greenplum的日志管理
Greenplum的日志管理本篇文档首先介绍GP的日志架构,日志工具的使用说明,然后介绍一下日志的定期清理配置案例[TOC]日志架构日志路径下面的表格展示了各种Greenplum数据库日志文件的位置。在文件路径中,date是YYYYMMDD格式的日期,instance是当前的实例名称,而n是Segm
让你的数据库飞起来!Greenplum查询优化解析
本文将主要包括两大部分,第一部分是查询优化器的介绍,第二部分是查询优化的具体处理过程,整个过程将被分为四个阶段:查询树的预处理,扫描/连接优化,扫描/连接之外的优化,计划树的后处理,我们将在本文中一一展开。首先我们来介绍一下查询优化器是做什么的。对于给定的查询语句,查询优化器会找到“代价”最小的查询
特性分析 | GreenPlum Primary/Mirror 同步机制
引言PostgreSQL主备同步机制是通过流复制实现,其原理见PG主备流复制机制。Greenplum是基于PostgreSQL开发的,它的主备也是通过流复制实现,但是Segment节点中的Primary和Mirror之间的数据同步是基于文件级别的同步实现的。为什么Primary和Mirror不能再使
「MADlib」Greenplum In-database 分析介绍
今年QCon大会,蚂蚁金服发布了开源SQLConnectAI产品SQLFlow,旨在“降低人工智能应用的技术门槛,让技术人员调用AI像SQL一样简单”。SQLFlow的思想最早可以追溯到2005年,当时ThomasTileston提出了In-database分析,将数据库与数据挖掘、机器学习有机地统
Greenplum SQL问题重现利器 Minirepo
大家在使用Greenplum的过程中可能会遇到跑了某种SQL而导致数据库PANIC问题,或者数据库的执行计划并没有那么合理而导致SQL性能过慢的问题。这样的时候,作为商业用户,可以联系VMware技术支持部门来获取帮助。GreenplumSQL问题重现利器Minirepo可以帮我们断定问题是执行计划
Greenplum在线扩容工具“GPExpand”最详解读
GPExpand是Greenplum数据库的扩容工具,可以为集群增加新节点从而可以存储更多的数据,提供更高的计算能力。Greenplum5及之前,集群扩容需要停机增加新节点,然后对表数据做重分布。因为集群大小已经改变,所以重分布之前要先将所有哈希分布表改成随机分布,然后再按照新的集群大小重新计算哈希
特性分析 | GreenPlum 的并行查询优化策略详解
架构GreenPlum采用ShareNothing的架构,良好的发挥了廉价PC的作用。自此I/O不在是DW(datawarehouse)的瓶颈,相反网络的压力会大很多。但是GreenPlum的查询优化策略能够避免尽量少的网络交换。对于初次接触GreenPlum的人来说,肯定耳目一新。查询优化器Gre
Greenplum 6 磁盘配额管理工具“Diskquota”
Diskquota是什么Diskquotaextension是Greenplum6.0提供的磁盘配额管理工具,它支持控制数据库schema和role的磁盘使用量。当DBA为schema或者role设置磁盘配额上限后,diskquota工作进程负责监控该schema和role的磁盘使用量,并维护超出配
Greenplum和InfluxDB数据源添加及仪表盘测试
作者:_風箏链接:https://juejin.cn/post/7092022973866967077