全部博文
-
编辑 删除
Hadoop Hdfs:小文件的硬盘占用
hadoop hdfs 文件存储的时候的block 大小是很大的，比如64M一个，远大于机器的本地文件系统的block大小。 那么如果在hdfs上存储一个小文件，到底会占用多大的硬盘空间呢？ 从 http://stackoverflow.com/questions/15062457/hdfs-block-size-vs-actual-file-size 看，其实只占用很小的硬盘空间。实际上 64M 的块大小，只是文件切分存储的大小。小文件对于 hadoop的影响在于对于 namenode的影响。 [附] http://stackoverflow.com/questions/15062457/hdfs-block-size-vs-actual-file-size 引用如下： Q: &n
