什么是大数据?
随着云时代的来临,大数据(big data )也吸引了越来越多的关注。那么,大数据究竟是什么呢?它的定义、结构、特点是什么呢?它又能应用在哪些方面呢?相信通过这篇文章你可以对大数据有一个全新全面的认识。
一、定义
大数据(big data ),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
二、特点
国际商业机器公司(简称:IBM )提出了大数据的5V 特点,即:Volume (大量)、Velocity (高速)、Variety (多样)、Value (低价值密度)、Veracity (真实性)。
三、结构
大数据包括结构化、半结构化和非结构化数据,非结构化数据越来越成为数据的主要部分。据IDC 的调查报告显示:企业中80% 的数据都是非结构化数据,这些数据每年都按指数增长60% 。
想要系统的认知大数据,必须要全面而细致的分解它,着手从三个层面来展开:
第一层面是理论,理论是认知的必经途径,也是被广泛认同和传播的基线。在这里从大数据的特征定义理解行业对大数据的整体描绘和定性;从对大数据价值的探讨来深入解析大数据的珍贵所在;洞悉大数据的发展趋势;从大数据隐私这个特别而重要的视角审视人和数据之间的长久博弈。
第二层面是技术,技术是大数据价值体现的手段和前进的基石。在这里分别从云计算、分布式处理技术、存储技术和感知技术的发展来说明大数据从采集、处理、存储到形成结果的整个过程。
第三层面是实践,实践是大数据的最终价值体现。在这里分别从互联网的大数据,政府的大数据,企业的大数据和个人的大数据四个方面来描绘大数据已经展现的美好景象及即将实现的蓝图。
四、应用
1. 洛杉矶警察局和加利福尼亚大学合作利用大数据预测犯罪的发生。
2.google 流感趋势(Google Flu Trends) 利用搜关键词预测禽流感的散布。
3.. 统计学家内特. 西尔弗(Nate Silver) 利用大数据预测2012 美国选举结果。
4.. 麻省理工学院利用手机定位数据和交通数据建立城市规划。
5. 梅西百货的实时定价机制。根据需求和库存的情况,该公司基于SAS 的系统对多达7300 万种货品进行实时调价。
6. 医疗行业早就遇到了海量数据和非结构化数据的挑战,而近年来很多国家都在积极推进医疗信息化发展,这使得很多医疗机构有资金来做大数据分析。
通过以上几个方面说明:现在已经迎来了大数据时代。因此大数据开发成为各企业非常看重的一部分,对这方面的人才需求也逐渐增多。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69912514/viewspace-2902155/ ,如需转载,请注明出处,否则将追究法律责任。