安装Hadoop,
一:设置本机无密码登录
cd ~/.ssh ssh-keygen -t rsa cp id_rsa.pub authorized_keys验证:ssh localhost
二:安装jdk
下载jdk: http://www.oracle.com/technetwork/java/javase/downloads/jdk6-jsp-136632.htmlcd /usr/local 将下载的jdk拷贝到/usr/local目录下 chmod u+x jdk-6u24-linux-i586.bin
./jdk-6u24-linux-i586.bin vim /etc/profile 编辑/etc/profile文件添加两行 export JAVA_HOME=/usr/local/jdk export PATH=$JAVA_HOME/bin:$PATH source /etc/profile
验证:java -version
三:安装hadoop
cd /usr/local tar -zxvf hadoop-1.1.2.tar.gz mv hadoop-1.1.2 hadoop vim /etc/profile 编辑/etc/profile文件添加两行 export HADOOP_HOME=/usr/local/hadoopexport PATH=$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH source /etc/profile
编辑Hadoop配置文件
在$HADOOP_HOME/conf目录下
1, hadoop-env.sh 第9行取消注释修改为 export JAVA_HOME=/usr/local/jdk2, core-site.xml
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop:9000</value>
<description>change your own hostname replace hadoop</description>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/hadoop/tmp</value>
</property>
</configuration>
将Hadoop改成你自己主机的主机名
3, hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.permissions</name>
<value>false</value>
</property>
</configuration>
4, mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>hadoop:9001</value>
<description>change your own hostname</description>
</property>
</configuration>
将Hadoop改成你自己主机的主机名
去除警告信息:vim /etc/profile 添加一行
export HADOOP_HOME_WARN_SUPPRESS=1
Hadoop格式化
hadoop namenode -format启动
start-all.sh验证
jps1184 DataNode
1510 TaskTracker
1692 Jps
1380 JobTracker
1303 SecondaryNameNode
1030 NameNode
浏览器验证
主机名:50070 NameNode 主机名:50030 jobtrackerwin7通过主机名访问需修改hosts文件 c:\windows\System32\drivers\etc\hosts 将hadoop的ip和主机名添加进去
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。