HDFS故障分析

由于HDFS中NN的重要性及数据存放在缓存中,所以容易发生下面两种情况:

1、单点故障

      高可用HA,多NN,主备切换。HDFS1.x时只支持单个NN,2.x时支持1主一备,3.x支持1主5备,推荐一主三备

2、压力过大,内存受限

    a、联邦机制 Federation 元数据分片

    多个NN,管理不同的元数据,通俗来讲每个nn维护不同的命名空间

    有利有弊,一个NN看不到全部的数据

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容