Hadoop2.x如何解决NN单点故障问题

这篇文章给大家介绍Hadoop2.x如何解决NN单点故障问题,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

成都创新互联公司长期为近1000家客户提供的网站建设服务,团队从业经验10年,关注不同地域、不同群体,并针对不同对象提供差异化的产品和服务;打造开放共赢平台,与合作伙伴共同营造健康的互联网生态环境。为岚山企业提供专业的做网站、网站建设岚山网站改版等技术服务。拥有十多年丰富建站经验和众多成功案例,为您定制开发。

hadoop解决单点故障问题主要是通过两种方式:

1、NFS文件共享

2、QJM 方式 CLOUDERA提出的

在Hadoop2.x中有两个nn,一个是 active namenode状态是active,另一个是standy namenode  状态是standy两者是进行切换的,但是有且只有一个active!

nfs方式是重量级的需要单独部署维护的,他作为namenode和standy namenode之间数据共享的存储,缺点是如果active 那么node 或者standy namenode有一个和nfs之间发生网络故障,将会造成数据同步问题。

Hadoop2.x如何解决NN单点故障问题

QJM方式解决了nfs面临的问题,active namenode和standy namenode 之间通过一组journalnode奇数来共享数据,active nn 把最近的edits文件写到2n+1个journalnode只有n+1个写入成功,然后standy nn 就开始读取,这种方式支持容错!

关于Hadoop2.x如何解决NN单点故障问题就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。


网页名称:Hadoop2.x如何解决NN单点故障问题
转载注明:http://csruizhi.cn/article/igooos.html

其他资讯

Copyright © 2007-2024 成都优众联杰科技有限公司 All Rights Reserved 蜀ICP备2024116266号
友情链接: 重庆手机网站建设 重庆企业网站建设 网站建设费用 网站制作公司 成都网站建设 成都网站制作 成都定制网站建设 网站建设开发 手机网站制作 高端网站设计 成都模版网站建设 移动网站建设 网站建设公司 定制网站建设多少钱 成都网站制作 高端网站设计 网站设计制作报价 响应式网站设计方案 成都网站制作 广安网站设计 达州网站设计 成都网站设计