HashData如何找到并合法清理进程会话
HashData如何找到并合法清理进程会话查看指定数据库存在的用户进程存在一些疑问点查看指定数据库存在的用户进程此处我们以warehouse数据库为例:warehouse=#select*frompg_stat_activity;datid|datname|procpid|sess_id|usesy
降低大数据分析门槛,HashData打造云端数据仓库
从单机数据库到分布式数据仓库,数据的存储和分析的方式在不断演进,2016年成立的酷克数据则是将数据仓库搬上云端,推出了SQL-on-Cloud。HashData,致力于降低企业大数据分析门槛❆1、云端数据仓库HashData联合创始人简丽荣,先后在IBM、雅虎以及Pivotal从事分布式计算研发工作
HashData之PostGis实验(一)
本次我们就从能找到的一些基础来做一些PostGis熟悉性的实验。首先说明一下添加postgis插件的方法:切换到HashData管理用户下,默认情况下是(gpadmin)执行以下SQL:psql-d<DATABASE_NAME>-f/opt/gpsql/share/postgresql/
HashData 数据库故障处理(一)
项目背景在混合使用的环境中,特别是测试环境。如果数据库长时间没有使用,再次使用的时候可能会遇到数据库不能使用的情况,导致这个情况出现的原因:在没有正常关闭HashData数据库的情况下进行了集群中某些机器的重启。服务器时间未做ntp时钟同步,时差过大。修改了防火墙信息。人为误操作,导致数据库进程不正
HashData 数据仓库离线安装手册
HashData数据仓库离线安装手册第一章:文档概述1.1适用范围本安装手册适用于HashData数据仓库V1.2.2版本的离线安装操作。本安装手册适用于RedhatLinux7.0以上版本和CentOS7.0以上版本的操作系统。本安装手册适用于开发测试环境的安装部署。生产环境的安装部署请联系售后。
HashData-用户自定义类型
本章概要:简单介绍createtype类型的创建和使用。留后补充case1:创建一个compfoo数据类型:CREATETYPEcompfooAS(f1int,f2text);1创建一个表foo,插入两条测试数据:createtablefoo(fooidint,foonamevarchar);ins
HashData 常用数据类型
表一:HashData支持的数据类型—-数值类型类型名称存储空间描述范围smallint2字节小范围整数-32768~+32768integer4字节常用的整数-2147483648~+2147483648bigint8字节大范围的整数-9223372036854775808~+9223372036
HashData实战案例:使用Alluxio构建云原生分析型MPP数据库
本文将介绍北京一家初创企业HashData构建基于云原生的MPP平台的过程。该企业利用对象存储作为数据持久层,Alluxio作为云中的数据编排层,最终构建了一个原生云高性能MPP共享的体系架构。HashData是由一群来自Pivotal、Teradata、IBM、Yahoo!等开源数据资深人士于20
HashData计算存储分离技术在建行大数据云平台中的应用实践
摘要:建行数据平台经历了数据仓库、新一代数据平台和大数据云平台三个阶段。本文简要的介绍了在第三阶段:大数据云平台这个阶段,HashData计算存储技术如何解决以前的一些问题与挑战以及目前一些建设成果。建行数据平台发展历程(图片来源:建信金融科技)第一阶段:数据仓库+ODS2004年左右,建行开始真正
HashData与HDFS的高效数据交换
背景与挑战在对象存储技术出现和普及之前,HDFS(Hadoop分布式文件系统)是市场上为数不多的开源、免费、高性价比(相对于昂贵的SAN系统)PB级存储系统,大量用于企业数据归档场景。同时,HDFS之上衍生了很多针对不同技术要求的分布式计算框架,使其适用于非结构化数据的清洗规整、流式计算和机器学习等
对象存储与HashData多云战略
|多云架构的应运而生今天,随着企业数字化进程的推进,多云成为了企业IT基础设施建设的重要特点。多云战略的实施,帮助企业降低了成本,提高了服务效率及安全性。特别是全球性跨国公司,不仅需要业务集中化管理,同时需要满足不同地域的业务运营和监管需求。相比于AWS、Azure、谷歌云等公有云上的云原生数据仓库
HashData外部表的实现与应用
背景外部表是数据仓库非常重要的一个功能特性,包括AWSRedshift、AzureSynapse、GoogleBigQuery和Snowflake等云数仓产品都有着完善的支持。顾名思义,外部表与内部表(或者内置表)对应,后者指的是正常的数据库表,无论是表的元数据还是物理数据文件均由数据库自身管理,而
HashData 和 Snowflake 的“同”与“异”
随着数据量和商业分析需求的急剧增长,传统的企业级数据仓库在应对高并发、高可用、高扩展性、易用性等挑战时,心有余而力不足。自此,企业对和数据仓库的需求进一步发生了变化,推动了第四代数据仓库——以Snowflake为代表的“云原生数据仓库”迅速崛起。提到Snowflake公司,这位顶着“股神”巴菲特的光
HashData实战系列—云原生的支持地理信息数据分析
空间数据库的诞生随着大数据技术的发展,急剧增长的地理空间大数据已成为海量数据处理的重要组成。地理空间大数据是指带有地理坐标的数据,包括资源、环境、经济和社会等领域一切带有地理坐标的数据,是地理实体的空间特征和属性特征的数字描述,应用前景多样。HashData通过将PostGIS用作插件,引入对空间数
HashData多集群共享统一存储架构
“HashData云原生架构”是HashData原创的系列文章。在第一篇《对象存储与HashData多云战略》的文章中提到:HashData数据仓库使用对象存储作为数据持久层,通过巧妙地在对象存储Bucket与数据库表空间建立映射关系,同一个HashData集群可访问(读写)不同对象存储系统的数据,
HashData助力梦想云建设统一数据湖
在过去35年里,中国石油的信息化建设历经了分散建设、集中建设、集成应用三个阶段,石油信息人一直致力于数据库及深化应用的建设。然而,受技术的限制,一直没有统一的技术平台。数据多头录入、标准不统一、功能重复开发、数据流与业务流分离,“三多”现象突出,部分油田公司的统建、自建系统多达上百个,接口上千个,数
HashData助力销售易构建智能分析云平台
背景销售易是融合新型互联网技术的企业级CRM开创者,支持企业从营销、销售到服务的全流程自动化业务场景。相较于传统CRM软件以管理销售人员为核心,深受企业用户欢迎的新一代CRM——销售易致力于利用社交、移动、人工智能和IoT等新型互联网技术,构建一款以“连接”为核心,将企业同客户互动的全过程数字化、智
HashData助力中科院打造地球大数据
1背景中国科学院“地球大数据科学工程”A类战略性先导科技专项(简称“地球大数据专项”)于2018年1月1日正式立项。该工程以建成具有全球影响力、国际化、开放式的国际地球大数据科学中心为目标,致力于推动并实现地球大数据技术创新、重大科学发现和一站式全方位宏观决策系统。地球大数据专项一个典型的应用例子是
HashData实战系列—云原生的支持地理信息数据分析
空间数据库的诞生随着大数据技术的发展,急剧增长的地理空间大数据已成为海量数据处理的重要组成。地理空间大数据是指带有地理坐标的数据,包括资源、环境、经济和社会等领域一切带有地理坐标的数据,是地理实体的空间特征和属性特征的数字描述,应用前景多样。HashData通过将PostGIS用作插件,引入对空间数
HashData的“信创之道”
当前,数据已成为重要的生产要素。数据的生成、采集、分析、流通与共享,是激活数据要素潜能的关键支撑,也是加快经济社会发展质量变革、效率变革、动力变革的重要引擎。“十四五”规划纲要提出,“要加快数字化发展,推进数字产业化和产业数字化,推动数字经济和实体经济深度融合”,“推动互联网、大数据、人工智能等同各