ITPub博客

一、背景说明上周支撑某现场时接触到了greenplum，本文用来记录greenplum的一些常用使用命令，以及个人对Greenplum的一些思考。我司的大数据平台通过JDBC、PXF两种方式将外部数据源导入到greenplum组件。JDBC方式，即和Spark往oracle等关系型数据库一样，直接调

SQL语法列转行selectunnest(string_to_array('111,222,333',','));selectarray_remove(array[a,b,c],null);selectarray[a,b,c,d]fromxx;SQL优化系统开关参数名称参数介绍默认optimizer

目录一、gpexpand介绍二、扩容介绍三、纵向扩容3.1、扩容前准备3.2、创建初始化文件3.3、初始化Segment并且创建扩容schema3.4、重分布数据3.5、移除扩容schema四、横向扩容4.1、安装前准备4.2、基本配置和规划4.3、创建初始化文件4.4、初始化Segment并且创建

Greenplum安装总结一、环境说明服务器centos74台，一台Master节点,三台Segment节点:mdw192.168.43.21（master节点）sdw1192.168.43.22(segment节点，包含两个primarysegment,两个mirrorsegment）sdw219

资源组和资源队列在Greenplum4版本中，要管理数据库的内存、CPU和并发事务只有资源队列(ResourceQueues)这一种方法。而Greenplum5及之后的版本，提供了两种负载管理方法:资源队列(ResourceQueues)和资源组(ResourceGroup)，且Greenplum数

、测试方式为了测试在Spark框架下以不同方式将数据插入GreenPlum的性能，这里需要准备足够量的数据。我采用的是gzip格式压缩的Hdfs数据，在这种压缩格式下数据量约1.2G，数据条目共34946664条，测试中会插入一个GreenPlum表中，按其中一个字段作为分区存入三个表分区中。输出表

1.服务启动先试用root账户登录mkdir-p/data/gpfdist/datamkdir-p/data/gpfdist/logchown-Rgpadmin:gpadmin/data/gpfdistsu-gpadmin启动服务gpfdist-d/data/gpfdist/data-p9091-l

Greenplum迁移指南Greenplum迁移指南目录第一节Greenplum数据迁移方法论1.1为什么要进行数据迁移1.2迁移整体的流程第二节Greenplum数据迁移工具2.1迁移工具2.2迁移工具--pra2pg2.3迁移工具--sqluldr22.4迁移工具--sqldata第三节如何实现

原文作者：姚延栋原文链接：http://www.postgres.cn/v2/news/viewone/1/453关于作者姚延栋，山东大学本科，中科院软件所研究生。PostgreSQL中文社区委员，致力于Greenplum/PostgreSQL开源数据库产品、社区和生态的发展。一、数据库内核揭秘Gr

GPDB是一个列式数据库，数据库都有什么特性呢？都能做什么呢？熟悉MySQL，Oracle的同学可能就比较清楚关系型数据库的管理，下面我们就来说下GPDB的一些管理和常用操作。数据库常用操作分为:创建数据库、创建schema、创建资源池、创建角色、创建用户、创建表。下面我们一一来说下GPDB这些常用

Greenplum对JSON的支持源文章:http://www.postgresqltutorial.com/postgresql-json/Greenplum对JSON的支持11JSON概述12JSON常用运算符与函数22.1JSON常用运算符22.2JSON常用的创建函数32.3JSON处理函数

首先看下GP7内置函数处理机制：GP7的内置函数机制和GP6稍有不同。其中内置函数元数据信息来自pg_proc.dat。pg_proc.dat中是什么东西呢？......例如加法的函数int4_sum。这里解释下几个重要成员：oid为函数的OID，descr为函数的描述，proname为函数名，pr

聚合的执行需要状态描述信息，由AggState结构体管理。该结构体如下：typedefstructAggState{ScanStatess;/*itsfirstfieldisNodeTag*/List*aggs;/*allAggrefnodesintargetlist&quals*/intn

参考https://github.com/greenplum-db/gporcaORCA是PostgreSQL的下一代优化器，在QUERY的优化上比自带的优化器更先进。1.安装cmake$wgethttps://cmake.org/files/v3.16/cmake-3.16.4.tar.gz$ta

Mysql在面对大数据量的时候，还是表现有些吃力，所以产品中需要扩展能支持海量数据的数据库，这里选择的数据库为Greenplum6，Greenplum底层使用的是开源数据库PostgreSQL。本文会介绍怎样在CentOS7中安装Greenplum6，并使用dotNETCore程序进行连接访问。环境

Greenplum6安装部署实战安装后添加standby节点http://www.dbdream.com.cn/2016/02/greenplum%E6%95%B0%E6%8D%AE%E5%BA%93master%E8%8A%82%E7%82%B9%E6%90%AD%E5%BB%BAstandby/

Greenplum表空间是让数据库使用多个文件系统来存储数据库的对象，当创建一个表空间时，需要指定路径，这些路径会通过软链接的方式关联到实例工作目录的pg_tblspc目录下，并以tablespace_id为名称，目录结构是GPDB_大版本号_系统表版本号(GPDB_6_301908232)。表空间