做企业数据建设、平台运维和数据开发的从业者,几乎都遇到过同一个难题: 想要跨部门、跨租户共享数据,就只能反复复制、同步、搬运数据。
在PB级海量数据、多租户云原生架构、严苛数据合规的多重要求下,传统“数据搬家”的共享模式,早已无法适配企业数字化建设需求。为此,南大通用基于GBase 8a MPP数据库(gbase database)内核,构建了云原生数据仓库GCDW,彻底重构企业跨租户数据共享逻辑。
GCDW和传统数据工具最大的区别在于—— 不搬运数据,只开放权限。数据始终保留在源租户存储端,全程零复制、零迁移、零新增副本,目标租户仅通过元数据映射建立访问关系,查询时直接原位读取数据,从根源解决传统模式的所有痛点。
零拷贝共享,大幅降低海量数据存储成本
创建数据共享后,目标租户无需导入数据,只需创建一个映射表即可完成共享,映射表保存的是共享关系和元数据信息,真正的数据仍然保留在源租户。尤其适配TB/PB级海量数据场景,彻底杜绝数据冗余,大幅减少硬件存储开销和数据一致性运维工作量。
双模式适配,兼顾实时业务与合规审计
针对企业两类核心数据需求,GCDW打造双向适配能力:实时共享适配运营监控、实时报表、在线查询,目标租户每次查询时都能访问源租户当前最新数据,无需任何同步任务即可获取最新数据;快照共享锁定固定时间节点数据版本,创建快照时记录当前的数据一致性版本,后续源数据更新不影响快照内容,完美满足财务核算、监管报送、审计追溯的合规要求,保证分析结果一致、报表数据稳定、审计数据可追溯。
表+视图双共享,助力企业数据治理标准化
GCDW不仅支持原始数据表共享,更支持封装后的业务视图共享。源租户可以将已经封装好的业务视图共享给目标租户,通过视图共享隐藏底层复杂的数据模型,为业务提供统一的数据接口,既能屏蔽底层复杂数据结构、保护敏感数据,又能实现全企业统一数据服务出口,提升数据治理规范化水平。
元数据加密管控,筑牢租户安全隔离防线
依托GBase 8a成熟的公共元数据管理体系,所有共享授权、映射关系、快照版本加密存储,其他租户无法访问。系统将共享信息统一维护在公共元数据中,包括数据共享定义、共享对象、授权租户、快照版本、映射关系等信息。整个过程中仅共享元数据和访问权限,不传输业务数据,严格保障租户数据隔离,所有访问行为可审计、可追溯,完全契合政企数据安全合规标准。
兼容标准SQL,零学习成本快速落地
租户映射完成后,共享数据使用体验与本地数据完全一致,开发人员无需关心数据来自哪个租户,也无需了解底层数据访问方式,只需使用标准SQL即可完成跨租户数据查询、分析、开发工作,极低门槛完成业务落地。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69979120/viewspace-3185774/ ,如需转载,请注明出处,否则将追究法律责任。