-
编辑 删除
gphdfs外部表和hive的融合
一、在所有节点上安装java1.6或以上版本二、在segment上安装hadoop，支持以下版本。Hadoop DistributionVersiongp_hadoop_ target_versionPivotal HD...
-
编辑 删除
mysql联合索引的选择性
联合索引就是同时对表中多个列进行索引，联合索引会依次根据联合索引中的列排序存储。下面通过下面的实验来探讨下联合索引的使用选择性：版本：percona 5.6.27create table test(a int,b int,c int,name varchar(32),PRIMARY key(a),key index_a_b_c(a,b,c)) ENGINE=INNODBinser...
-
编辑 删除
python跨库检查数据一致性
因为最近上线了samza实时流平台，实时从源数据端实时传输数据到数据仓库，于是就需要检查samza数据传输的准确性，则通过下面的python脚本定时检查两个数据端表的行数，以简单的检测下数据一致性。下面的脚本每天在早上6点运行，检查昨天以前的所有数据行数是否一致，并邮件通知。因为要检测的表比较多，并且清洗规则不一...
-
编辑 删除
greenplum何时收集统计信息
在GP的postgresql.conf中有控制自动收集统计信息的参数 gp_autostats_mode设置，gp_autostats_mode有三个值：none、no_change、no_no_stats（默认）none：禁止收集统计信息no_change：当一条DML执行后影响的行数超过gp_autostats_on_change_threshold参数指定的值时，会执行完这条DML后再自动执行一个analyze的操...
-
编辑 删除
GP修改参数导致重启失败
[gpadmin@gp-segment5 ]$ gpstart ..... 20170104:16:35:48:000907 gpstart:gp-segment5:gpadmin-[CRITICAL]:-Failed to start Master instance in admin mode 20170104:16:35:48:000907 gpstart:gp-segment5:gpadmin-[CRITICAL]:-Error occurred: non-zero rc: 1 Command was: 'env GPSESSID=0000...
