Hadoop2.x如何解决NN单点故障问题

这篇文章给大家介绍Hadoop2.x如何解决NN单点故障问题,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

成都创新互联公司长期为近1000家客户提供的网站建设服务,团队从业经验10年,关注不同地域、不同群体,并针对不同对象提供差异化的产品和服务;打造开放共赢平台,与合作伙伴共同营造健康的互联网生态环境。为岚山企业提供专业的做网站、网站建设岚山网站改版等技术服务。拥有十多年丰富建站经验和众多成功案例,为您定制开发。

hadoop解决单点故障问题主要是通过两种方式:

1、NFS文件共享

2、QJM 方式 CLOUDERA提出的

在Hadoop2.x中有两个nn,一个是 active namenode状态是active,另一个是standy namenode  状态是standy两者是进行切换的,但是有且只有一个active!

nfs方式是重量级的需要单独部署维护的,他作为namenode和standy namenode之间数据共享的存储,缺点是如果active 那么node 或者standy namenode有一个和nfs之间发生网络故障,将会造成数据同步问题。

Hadoop2.x如何解决NN单点故障问题

QJM方式解决了nfs面临的问题,active namenode和standy namenode 之间通过一组journalnode奇数来共享数据,active nn 把最近的edits文件写到2n+1个journalnode只有n+1个写入成功,然后standy nn 就开始读取,这种方式支持容错!

关于Hadoop2.x如何解决NN单点故障问题就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。


分享名称:Hadoop2.x如何解决NN单点故障问题
网站链接:http://bzwzjz.com/article/igooos.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 重庆企业网站建设 成都品牌网站设计 网站建设公司 网站制作 营销网站建设 手机网站设计 营销型网站建设 H5网站制作 成都网站设计 成都网站建设 外贸营销网站建设 成都网站建设 成都网站建设 成都网站设计 成都网站建设 企业网站建设公司 网站制作公司 网站设计制作 定制级高端网站建设 成都商城网站建设 手机网站制作 成都品牌网站建设