HDFS在复制下

Question

何时在HDFS中复制？由于复制因子在hdfs-site.xml中设置，复制由Hadoop框架处理。

Answer 1

关于下复制： 这种情况发生在集群中的一个或多个的Datanode下去，因为一些故障，永远不再回来。在这种情况下，存储在这些下行节点上的块的预期复制因子减少。

关于过度复制： 当一个或多个Datanodes出现故障但在一段时间后回来时，会再次发生这种情况。对于那短暂的停机时间，Namenode发现有些块被低复制，并开始复制低复制块以使块计数正常。如果一段时间后，那些下来的Datanodes又回来了，那么将会有超出预期的块的额外副本。