hadoop集群配置,
参考文档: http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/ClusterSetup.html
下载hadoop安装 地址:http://apache.fayea.com/hadoop/common/stable/ 可以返回上级目录下载新版
解压到目录,/usr/tools/ 没有此目录就先创建
cd /usr/tools
解压 tar -zxvf hadoop-2.7.3.tar.gz
切换到 hadoop安装目录 cd /usr/tools/hadoop-2.7.3
配置 JAVA_HOME环境 配置如下几个文件
etc/hadoop/hadoop-env.sh ,etc/hadoop/mapred-env.sh , etc/hadoop/yarn-env.sh
找到JAVA_HOME ,注释掉以前的,新起一行 配置自己本机的jdk安装目录
#export JAVA_HOME=${JAVA_HOME}
export JAVA_HOME=/usr/java/jdk1.7.0_79
创建用户组和用户
[root@localhost hadoop-2.7.3]# groupadd hadoop
[root@localhost hadoop-2.7.3]# useradd -g hadoop hadoop
[root@localhost hadoop-2.7.3]# passwd hadoop
给用户添加权限
[root@localhost hadoop-2.7.3]# vi /etc/sudoers
文件内容添加一行
hadoop ALL=(ALL) ALL
修改host文件
[root@localhost hadoop-2.7.3]# vi /etc/hosts
配置etc/hadoop/core-site.xml
配置etc/hadoop/hdfs-site.xml
配置etc/hadoop/yarn-site.xml
配置 etc/hadoop/mapred-site.xml
所有配置完成后,进入安装目录 hadoop
bin/hdfs namenode -format
sbin/start-all.sh