Hive View,
Hive View, Hive 0.6版本及以上支持视图,Hive View具有以下特点: 1)View是逻辑视图,暂不支持物化视图(后续将在1.0.3版本以后支持); 2)View是只读的,不支持LOAD/INSERT/ALTER。需要改变...(发布于2019-11-30 22:10:14)
Hive安装部署,
Hive安装部署, 下载,解压 下载:hive-1.1.0-cdh5.7.1.tar.gz [root@wjxhadoop001 software]#wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.1.tar.gz 这里使用的hadoop版本是cdh5.7.1,下载的hive版本要与hado...(发布于2019-11-25 22:12:10)
HIVE 学习笔记,
HIVE 学习笔记, 1、 hive建表语法中的分隔符设定 ROW FORMAT DELIMITED 分隔符设置开始语句 FIELDS TERMINATED BY:设置字段与字段之间的分隔符 COLLECTION ITEMS TERMINATED BY:设置一个复杂类型(arra...(发布于2019-11-25 22:12:06)
Hive优化,
Hive优化, 转载请注明出处:https://blog.csdn.net/jackie_zhf/article/details/79999613 Hive 优化 核心思想:把Hive SQL 当做Mapreduce程序去优化 以下SQL不会转为Mapreduce来执行 --select仅查询本表字段 --wh...(发布于2019-11-25 22:12:02)
hive 安装,
hive 安装, hive 安装 下载地址apache-hive-x.y.z-bin.tar.gz。选择版本。本文中的 x.y.z 代表hive的某个版本例如 3.1.1 wget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-3.1.1/apache-hive-x.y.z-bin.tar.gz tar...(发布于2019-11-25 22:11:58)
hive安装配置,
hive安装配置, Hive:数据仓库。 Hive:解释器,编译器,优化器等。 Hive运行时,元数据存储在关系型数据库里面。 安装一个关系型数据,(mysql):yum install mysql-server 替换jar : 将...(发布于2019-11-25 22:11:54)
Hive环境搭建,
Hive环境搭建, 前言: 首先Hive中的元数据默认存放在Derby中,Derby是单用户的,使用起来不方便,我们使用MySQL来存储Hive的元数据信息,元数据包括表的名字,表的列和分区及其属性,表...(发布于2019-11-25 22:11:50)
安装Hive,
安装Hive, 安装MySQL 当然你也可以使用默认的数据库Derby,不推荐。 wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpmrpm -ivh mysql-community-release-el7-5.noarch.rpmyum install -y mysql-serversystemct...(发布于2019-11-25 22:11:47)
Hive学习,
Hive学习, hive 三种启动方式及用途,关注通过jdbc连接的启动 1: hive 命令行模式,直接输入/hive/bin/hive的执行程序,或者输入 hive --service cli 用于linux平台命令行查询,查询...(发布于2019-11-25 22:11:42)
hive 函数,
hive 函数, 一、关系运算: 1. 等值比较: = 语法:A=B 操作类型:所有基本类型 描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE 举例:...(发布于2019-11-25 22:11:38)
Hive整理,
Hive整理, 1.Hive是什么? 2.Hive作用是什么? 3.为什么用它,它的好处? 4.hive和普通关系数据库的异同? 1.Hive是什么? Hive 是建立在hadoop架构上的数据仓库工具。 http://zhidao.baidu.com...(发布于2019-11-25 22:11:32)
Hive分区表,
Hive分区表, 1.增加分区: alter table item add partition (par_dt='2016-12-01') location '/user/test/item/2016-12-01' 2.删除分区: alter table item drop partition (par_dt='2016-12-01') 3.查看分区: show partitio...(发布于2019-11-24 22:11:15)
Hive入门,
Hive入门, 一 入门了解: 1.Hive是基于Hadoop之上的数据仓库。将海量的数据存储到hive做分析处理完成业务逻辑。数据仓库面向数据分析,普通数据库面向快速的读写业务逻辑。 2.hive的本...(发布于2019-11-24 22:11:11)
HIVE总结,
HIVE总结, 1.Hive架构设计概念 user interface :hive cli,hive client,hwi Hive CLI(hive command line interface):Hive命令行交互模式,默认支持 Hive Client(jdbc/odbc/beeline):Hive jdbc交互模式,外部程序或者服务对接...(发布于2019-11-24 22:11:07)
hive分区,
hive分区, 转自 https://www.cnblogs.com/yongjian/archive/2017/03/29/6640951.html 点击打开链接 Hive分区(静态分区+动态分区) Hive分区的概念与传统关系型数据库分区不同。 传统数据库的分区方式...(发布于2019-11-24 22:11:03)
Hive 安装,
Hive 安装, 安装hive 之前,要保证hadoop安装成功,本教程对应的是hadoop版本为2.6.4,hive 版本为 2.1.1,默认情况下,Hive元数据保存在内嵌的 Derby 数据库中,只能允许一个会话连接,只适合...(发布于2019-11-24 22:11:00)
Hive的理论基础,
Hive的理论基础,...(发布于2019-11-24 22:10:56)
Hive的UDTF,
Hive的UDTF, Refer to:http://blog.csdn.net/wf1982/article/details/7623708 1.介绍 UDTF(User-Defined Table-Generating Functions) 用来解决 输入一行输出多行(On-to-many maping) 的需求。同时,也可以解决一列拆...(发布于2019-11-24 22:10:52)
Hive基本操作,
Hive基本操作, 概要 Hive不存储数据,所有的CRUD都是对依赖的HDFS的操作,操作的过程是转化成MapReduce。 基本操作 (1)查看数据库列表:show databases; (2)查看数据表列表:show tables; (...(发布于2019-11-24 22:10:48)
hive 分区,
hive 分区, Hive 分区partition 必须在表定义时指定对应的partition字段 a、单分区建表语句: create table day_table (id int, content string) partitioned by (dt string); 单分区表,按天分区,在表结构中存在...(发布于2019-11-24 22:10:45)