Hadoop2.6-CDH5.7部署安装

cdh地址

http://archive-primary.cloudera.com/cdh6/cdh/5/

创新互联坚持“要么做到,要么别承诺”的工作理念,服务领域包括:成都网站建设、网站制作、企业官网、英文网站、手机端网站、网站推广等服务,满足客户于互联网时代的岐山网站设计、移动媒体设计的需求,帮助企业找到有效的互联网解决方案。努力成为您成熟可靠的网络建设合作伙伴!

添加sudo权限的无密码访问的hadoop用户

# useradd hadoop

# vi /etc/sudoers
    hadoop  ALL=(root)      NOPASSWD:ALL

# su - hadoop

下载 解压缩

[hadoop@hadoop000 softwore]$ wget http://archive-primary.cloudera.com/cdh6/cdh/5/hadoop-2.6.0-cdh6.7.0.tar.gz

[hadoop@hadoop000 app]$ tar -zxvf ../softwore/hadoop-2.6.0-cdh6.7.0.tar.gz 

修改配置

首先需要jdk1.7
[root@hadoop000 jdk1.7.0_80]# echo $JAVA_HOME
/usr/java/jdk1.7.0_80
修改 etc/hadoop/hadoop-env.sh 文件
在hadoop-env.sh文件中修改java_home
export JAVA_HOME=/usr/java/jdk1.7.0_80

增加HADOOP_PREFIX
export HADOOP_PREFIX=/home/hadoop/app/hadoop-2.6.0-cdh6.7.0
修改etc/hadoop/core-site.xml:

    
        fs.defaultFS
        hdfs://hadoop:9000
    
修改etc/hadoop/hdfs-site.xml:

    
        dfs.replication
        1
    
修改etc/slaves文件
hadoop

配置ssh免密

删除.ssh文件夹 防止冲突
# rm -rf .ssh

生成ssh秘钥
# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

修改authorized_keys 文件权限
chmod 600 authorized_keys

初始格式化hdfs

[hadoop@hadoop000 hadoop-2.6.0-cdh6.7.0]$ bin/hdfs namenode -format

启动hdfs

[hadoop@hadoop000 hadoop-2.6.0-cdh6.7.0]$ sbin/start-dfs.sh

jps查看进程

Hadoop2.6-CDH5.7部署安装

web ui 查看

Hadoop2.6-CDH5.7部署安装


网站题目:Hadoop2.6-CDH5.7部署安装
网站URL:http://bzwzjz.com/article/gojoip.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: LED网站设计方案 成都企业网站建设公司 高端网站设计 定制网站建设 成都网站制作 成都网站设计 高端网站建设 成都网站建设 成都网站设计 成都网站建设 宜宾网站设计 成都网站建设 定制级高端网站建设 重庆网站建设 成都网站建设 上市集团网站建设 定制网站设计 企业网站制作 成都网站设计公司 网站设计公司 H5网站制作 成都网站建设公司