ITPub博客

首页 > 架构设计 > > 《数据架构》阅读笔记(二)大数据

《数据架构》阅读笔记(二)大数据

作者:浪花小雨滴 时间:2020-05-20 11:27:52 0 删除 编辑

《数据架构——大数据、数据仓库以及Data Vault》,作者W.H. Inmon,DanielLinstedt,译者唐富年,人民邮电出版社,2017年。

笔记中有些内容直接引用原书。

================================================================

第二章 大数据

大数据是结构化的还是非机构化的?答案取决于如何定义结构化和非结构化。目前对于“结构化”的最广泛的定义是:所有通过标准DBMS管理的数据都是结构化的。要将数据装载到DBMS中,就需要对系统的逻辑特征和物理特征进行仔细定义。所有数据(包括属性、键和索引)都需要装载到系统之前进行定义。


如果结构化指的是包含带有可预见语境的重复型数据,那么可以大数据中的重复型数据是结构化的。


重复型非结构化数据容易进行分析的原因如下:a. 记录的表现形式是统一的; b. 记录通常短小而紧凑; c. 容易找到记录中的语境信息,因而容易解析。


非重复型非结构化数据较难分析的原因如下:a. 在表现形式上非常不统一; b. 有时小,有时大,有时非常大; c. 记录的解析非常困难,很多记录是文本组成的。文本处理比较复杂。


一个本体(ontology)可简单定义为一个分类法,且在这个分类法中的元素存在着相互关联的关系。


BrianZhang:《数据架构》阅读笔记(一)企业数据​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(三)数据仓库​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(四)Data Vault​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(五)作业环境​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(六)数据架构​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(七)重复型分析​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(八)非重复型分析​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(九)作业分析1​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(十)作业分析2​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(十一)个人分析​zhuanlan.zhihu.com图标BrianZhang:《数据架构》阅读笔记(十二完结篇)复合式的数据架构​zhuanlan.zhihu.com图标软件开发之路​zhuanlan.zhihu.com图标

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/31537575/viewspace-3133573/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: Docker 安装 MongoDB
请登录后发表评论 登录
全部评论

注册时间:2018-05-16

  • 博文量
    4259
  • 访问量
    40117