当前位置： 首页 > block

  • 为什么在Hadoop（HDFS）中块设置的很大？

    Feb152014

    相对于普通磁盘的块（4kb）来说HDFS的块要更大一些256M甚至更大（默认64M），如此设计的目的是为了减少在寻道上的开销。 如果把HDFS块设置的足够大，那么从磁盘传输数据的时间将明显大于检索块头部信息的时间，因此HDFS中大文件传输的时间由多个块在磁盘上的传输速率来决定。

    阅读全文
    作者：Fisher | 分类：分布式 | 标签：, ,
    抢沙发