欢迎投稿

今日深度:

hadoop的安装配置,

hadoop的安装配置,


前置操作:
普通用户获得管理员权限
1 切换到管理员用户
2 chmod u+w /etc/sudoers
vim /etc/sudoers
第九十九行写szt ALL=(ALL) ALL
关闭防火墙Systemctl strop firewalld.service
设置防火墙开机不自动启动Systemctl disable firewalld
免密登录首先Ssh-keygen -t rsa,然后ssh-copy-id szt-NODE1
jdk安装 复制jdk文件压缩包到用户目录下解压tar zxvf 压缩包名,将解压后目录名重命名为jdk
Vim ~/.bashrc添加以下内容Export JAVA_HOME=/home/szt/java/jdk
Export PATH=PATH:PATH:JAVA_HOME/bin
:wq
Source ~/.bashrc
使用java -version命令验证如果显示版本号与安装版本号相同,则证明安装成功了
hadoop的安装
首先将hadoop安装包复制到用户目录,mkdir hadoop,解压。
.bashrc文件内容增加
HADOOP_HOME=/home/ryan/hadoop/hadoopexport PATH=PATH:PATH:JAVA_HOME/bin:HADOOPHOME/bin:HADOOP_HOME/bin:HADOOP_HOME/sbin
source
配置hadoop
在home/szt/hadoop/hadoop-2.6.2目录下mkdir tmp
在home/szt/hadoop/hadoop-2.6.2/etc/hadoop/目录下需要配置以下文件
Hadoop-env.sh
export JAVA_HOME=/home/szt/java/jdk
Yarn-env.sh
export JAVA_HOME=/home/szt/java/jdk
Core-site.xml

fs.defaultFS
hdfs://node-1:9000


hadoop.tmp.dir
/home/ryan/hadoop/hadoop/tmp

Hdfs-site.xml

dfs.replication
3

Mapred-site.xml

mapreduce.framework.name
yarn

Yarn-site.xml

yarn.resourcemanager.address
rmhostname:8032

格式化hadoop namenode -format
查看home/szt/hadoop/hadoop-2.6.2/tmp是否出现文件
start-all.sh
jps
出现六行内容则配置完成

www.htsjk.Com true http://www.htsjk.com/Hadoop/41294.html NewsArticle hadoop的安装配置, 前置操作: 普通用户获得管理员权限 1 切换到管理员用户 2 chmod u+w /etc/sudoers vim /etc/sudoers 第九十九行写szt ALL=(ALL) ALL 关闭防火墙Systemctl strop firewalld.service 设置防火墙...
相关文章
    暂无相关文章
评论暂时关闭