欢迎投稿

今日深度:

安装Hadoop,

安装Hadoop,


一:设置本机无密码登录

cd  ~/.ssh ssh-keygen  -t  rsa cp  id_rsa.pub  authorized_keys
验证:ssh  localhost

二:安装jdk

下载jdk: http://www.oracle.com/technetwork/java/javase/downloads/jdk6-jsp-136632.html
cd  /usr/local  将下载的jdk拷贝到/usr/local目录下 chmod  u+x  jdk-6u24-linux-i586.bin
./jdk-6u24-linux-i586.bin vim /etc/profile  编辑/etc/profile文件添加两行 export  JAVA_HOME=/usr/local/jdk export  PATH=$JAVA_HOME/bin:$PATH source  /etc/profile
验证:java -version

三:安装hadoop

cd  /usr/local tar  -zxvf  hadoop-1.1.2.tar.gz mv  hadoop-1.1.2  hadoop vim /etc/profile  编辑/etc/profile文件添加两行 export HADOOP_HOME=/usr/local/hadoop
export PATH=$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH source  /etc/profile

编辑Hadoop配置文件

在$HADOOP_HOME/conf目录下

1, hadoop-env.sh 第9行取消注释修改为 export  JAVA_HOME=/usr/local/jdk
2, core-site.xml
<configuration>
    <property>
        <name>fs.default.name</name>
        <value>hdfs://hadoop:9000</value>
        <description>change your own hostname replace hadoop</description>
    </property>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/usr/local/hadoop/tmp</value>
    </property>
</configuration>
将Hadoop改成你自己主机的主机名
3, hdfs-site.xml
<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.permissions</name>
        <value>false</value>
    </property>
</configuration>

4,  mapred-site.xml
<configuration>
    <property>
        <name>mapred.job.tracker</name>
        <value>hadoop:9001</value>
        <description>change your own hostname</description>
    </property>
</configuration>
将Hadoop改成你自己主机的主机名 去除警告信息:vim /etc/profile 添加一行

export HADOOP_HOME_WARN_SUPPRESS=1


Hadoop格式化

hadoop namenode -format

启动

start-all.sh

验证

jps
1184 DataNode
1510 TaskTracker
1692 Jps
1380 JobTracker
1303 SecondaryNameNode
1030 NameNode

浏览器验证

主机名:50070  NameNode 主机名:50030  jobtracker
win7通过主机名访问需修改hosts文件 c:\windows\System32\drivers\etc\hosts 将hadoop的ip和主机名添加进去




www.htsjk.Com true http://www.htsjk.com/Hadoop/41857.html NewsArticle 安装Hadoop, 一:设置本机无密码登录 cd  ~/.sshssh-keygen  -t  rsacp  id_rsa.pub  authorized_keys 验证:ssh  localhost 二:安装jdk 下载jdk: http://www.oracle.com/technetwork/java/javase/downloads/jdk6-jsp-1366...
相关文章
    暂无相关文章
评论暂时关闭