HDFS副本放置策略

机架
机架 rack1 5 rack2 5

生产上读写操作 尽量选择 某个DN节点
第一个副本:
放置在上传的DN节点; (nn和dn放一个副本中,有利于提升速度)
假如是非DN节点,就随机挑选一个磁盘不太慢,cpu不太忙的节点;

第二个副本:
放置在第一个副本不同的机架上的某个DN节点。

第三个副本:
与第二个副本相同机架的不同节点上。

如果副本数设置更多,就随机放。

机架安装考虑用电和机架的安装能力

生产上一般不配置

  • 版权声明: 本博客所有文章除特别声明外,著作权归作者所有。转载请注明出处!
  • Copyrights © 2017-2021 WANG Qi
  • 访问人数: | 浏览次数:

请我喝杯咖啡吧~

支付宝
微信