安装hive，

和通数据库htsjk.Com2019-11-11 05:34 来源:未知阅读:12059 评论 80 热度4

标签：

安装hive，

安装mysql：

（1）下载安装包文件： wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm

（2）安装mysql-community-release-el7-5.noarch.rpm包： rpm -ivh mysql-community-release-el7-5.noarch.rpm

（3）安装mysql：

yum install mysql-server

yum install mysql

yum install mysql-devel

（4）安装成功后重启mysql服务。 service mysqld restart

（5）第一次进入mysql，root账户没有密码。 [root@master ~]# mysql -u root

（6）设置密码 mysql> set password for 'root'@'localhost' =password('root');

（7）远程连接设置把在所有数据库的所有表的所有权限赋值给位于所有IP地址的root用户。

mysql> grant all privileges on *.* to root@'%'identified by 'root';

如果是新用户而不是root，则要先新建用户 mysql>create user 'username'@'%' identified by 'root'; 此时就可以进行远程连接了。（8）配置默认编码 mysql配置文件为/etc/my.cnf，文末加上： [mysql] default-character-set =utf8

创建供hive使用的数据库：

mysql>create database hive_database;

安装hive：

hive与hadoop的对应关系，在hive官网查看

http://hive.apache.org/downloads.html

下载解压，创建软连接ln -s .. ..

环境变量：

#set hive env 

export HIVE_HOME=/export/servers/hive 

export PATH=$HIVE_HOME/bin:$HIVE_HOME/conf:$PATH

配置：/hive/conf/

hive-env.sh，指定hadoop目录

HADOOP_HOME=/export/servers/hadoop

hive-site.xml，配置 MySQL 数据库连接信息

<configuration>
<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&amp;characterEncoding=UTF-8&amp;useSSL=false</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
  </property>
</configuration>

配置mysql的驱动：

将 mysql-connector-java-5.1.40-bin.jar 放入 $HIVE_HOME/lib 下。

(需要，虽然在后面会提示：加载类“com.mysql.jdbc.Driver”。这是弃用。

新的驱动类是“com.mysql.cj.jdbc.Driver”。

驱动程序通过SPI自动注册，通常不需要手动加载驱动程序类。)

下载地址：http://dev.mysql.com/downloads/connector/j/

解压出来有mysql-connector-java-8.0.12.jar

为Hive创建HDFS目录（直接复制下面命令）：

创建 /tmp 和 /user/hive/warehouse 目录并给它们赋写权限。

(hive-site.xml 配置文件中属性项 hive.metastore.warehouse.dir 的默认值)

start-dfs.sh 

hdfs dfs -mkdir /tmp 

hdfs dfs -mkdir -p /usr/hive/warehouse 

hdfs dfs -chmod g+w /tmp 

hdfs dfs -chmod g+w /usr/hive/warehouse

hive在启动前到进行元数据初始化：

[root@master bin]# ./schematool -initSchema -dbType mysql

看到schemaTool completed 则初始化完成

启动：

[root@master conf]# hive

hive> show tables;

Time taken: 0.771 seconds

hive>

创建一张表：

hive> CREATE TABLE IF NOT EXISTS employee ( id int, name String, salary String, destination String);

Time taken: 0.791 seconds

hive> show tables;

employee

Time taken: 0.117 seconds, Fetched: 1 row(s)

hive>