流918

hadoop

Elasticsearch(1) Hadoop权威指南(2) hbase(1) IDEA的使用(1) java基础知识(5) linux一些问题(2) scala(1) spark(4) storm(2) zookeeper(3) 剑指offer(3) 未归档(81) 算法(24) 网络通信(3) 设计模式(2)

归档

标签

去牛客网

/ 注册

全部文章 / hadoop （共1篇）

关于hdfs分片和分块

1.分块从2.7.3版本开始，block size由64 MB变成了128 MB的。在分布式的HDFS集群上，Hadoop系统保证一个块存储在一个datanode上。 HDFS的namenode只存储整个文件系统的元数据镜像，这个镜像由配置dfs.name.dir指定，datanode则存...

2019-01-15

0 1024