全部課程
hdfs中block默認保存幾份
發布時間: 2023-01-30
一般來說,HDFS的常見拷貝冗余策略是默認保留3個拷貝。大型HDFS實例通常分布在由多個機架組成的集群中運行,機房里有多個機架,同一機架上的多個服務器在不同的機架上。作為一個分布式文件系統,HDFS使用多個副本進行冗余數據存儲,以提供容錯和系統可用性,通常一個數據塊的多個副本分布在不同的數據節點。
第一個副本:放置在 上傳文件 的數據節點(第一個副本如果是在 集群外 提交,則隨機挑選一個 CPU 比較空閑 、 磁盤不太滿 的節點);
第二個副本:放置在與 第一個副本 不同 的機架的節點上;
第三個副本:放在與 第二個副本 相同 的機架的其他節點上。
上一篇: ECS的產品架構
下一篇: hdfs的優缺點