hadoop集群部署注意问题有哪些

这篇文章将为大家详细讲解有关hadoop集群部署注意问题有哪些,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

创新互联是一家集网站建设,湖口企业网站建设,湖口品牌网站建设,网站定制,湖口网站建设报价,网络营销,网络优化,湖口网站推广为一体的创新建站企业,帮助传统企业提升企业形象加强企业竞争力。可充分满足这一群体相比中小企业更为丰富、高端、多元的互联网需求。同时我们时刻保持专业、时尚、前沿,时刻以成就客户成长自我,坚持不断学习、思考、沉淀、净化自己,让我们为更多的企业打造出实用型网站。

1、namenode 或datanode 被迫升级。

1)降级namenode,缺点:需要停止服务,不确定性因素太多(降级可能会导致所有数据丢失),测试周期长且复杂;优点:只要操作一个节点

2)升级所有的datanode,缺点:需要操作集群所有机器(也可以只升级单台机器);优点:测试简单,风险小

很明显,第二种方案是优选方案,测试过程如下:

1)找一台采集服务器,上面已经部署了hadoop客户端,启动datanode,成功,日志信息显示版本为:203.1

2)删除build目录,再次启动datanode,失败

3)恢复build目录,再次启动datanode,成功

4)将build目录拷贝到出错的datanode上,修改hdfs-site.xml配置,将data目录修改为新建目录,启动datanode,成功

5)将data目录修改为最原始的配置,启动datanode,成功

第二种方案测试成功,在namenode上运行fsck命令,正常输出。

关于“hadoop集群部署注意问题有哪些”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。


分享标题:hadoop集群部署注意问题有哪些
网页URL:http://bzwzjz.com/article/jpscio.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都网站设计 响应式网站设计 梓潼网站设计 成都网站建设 成都网站建设 成都h5网站建设 重庆网站建设 企业网站设计 网站建设公司 成都网站制作公司 手机网站制作设计 定制网站建设 重庆企业网站建设 成都网站建设公司 重庆网站建设 网站制作公司 企业网站设计 H5网站制作 成都网站制作 成都网站建设 成都响应式网站建设公司 温江网站设计