全部博文
-
编辑 删除
大数据技术解析—HDFS分布式文件系统设计
在这里将着重介绍Hadoop自带的分布式文件系统，HDFS 即 Hadoop Distributed Filesystem。HDFS 能够存储超大文件，可以部署在廉价的服务器上，适合一次写入多次读取的场景。但 HDFS 不适合低延迟，存储大量小文件以及修改文件内容的场景。HDFS 应用比较广泛，如：MR任务、Spark任务、Hive 数据仓库以及 Hbase 数据库，它们的底层存储都可以基于 HDFS 。本章将介绍 HDFS 集群的架构设计以及相关的重要概念......
