HDFS故障分析

核心提示由于HDFS中NN的重要性及数据存放在缓存中,所以容易发生下面两种情况:1、单点故障 ? 高可用HA,多NN,主备切换。HDFS1.x时只支持单个NN,2.x时支持1主一备,3.x支持1主5备,推荐一主三备2、压力过大,内存受限 a、联

由于HDFS中NN的重要性及数据存放在缓存中,所以容易发生下面两种情况:

1、单点故障

? 高可用HA,多NN,主备切换。HDFS1.x时只支持单个NN,2.x时支持1主一备,3.x支持1主5备,推荐一主三备

2、压力过大,内存受限

a、联邦机制 Federation 元数据分片

多个NN,管理不同的元数据,通俗来讲每个nn维护不同的命名空间

有利有弊,一个NN看不到全部的数据

FMECA包括故障模式及影响分析(FMEA)和危害性分析(CA)。故障模式、影响及危害性分析(FMECA)是针对产品所有可能的故障,并根据对故障模式的分析,确定每种故障模式对产品工作的影响,找出单点故障,并按故障模式的严酷度及其发生概率确定其危害性。所谓单点故障指的是引起产品故障的,且没有冗余或替代的工作程序作为补救的局部故障。

 
友情链接
鄂ICP备19019357号-22