欢迎投稿

今日深度:

Hive 的安装,

Hive 的安装, 嵌入模式: 1.解压下载好的hive 2.更改hive下的bin目录下的hive-config.sh文件      指定Hadoop和hive所在目录    export HADOOP_HOME=/*******   export HIVE_HOME=/*******   3.更改环境变量...(发布于2019-12-28 23:00:23)

Hive DML,

Hive DML, Hive DML LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1, partcol2=val2 ...)] FROM from_statement INSERT OVERWRITE TABLE tablename1 [PARTITION (partcol1=val1, partcol2=val2 ...) [IF...(发布于2019-12-28 23:00:19)

Hive简介,

Hive简介, Apache Hive Hive简介 1.什么是 Hive Hive 是基于 Hadoop 的一个数据仓库工具,可以将结构化的数据文件 映射为一张数据库表,并提供类 SQL 查询功能。 本质是将 L SQL 转换为 e MapRed...(发布于2019-12-28 23:00:14)

Hive的操作,

Hive的操作, HQL和SQL基本相同 Hive的数据库名和表明不区分大小写** ps:命名的时候1.不能以数字开头 2.不能使用关键字 3.不要使用特殊字符 常用命令 查询数据库 show databases; 创建一个数据...(发布于2019-12-28 23:00:10)

Hive(入门),

Hive(入门), 复习Hadoop 1) Hadoop是什么 存储  HDFS 计算  MapReduce 资源调度  YARN 2) HDFS的访问方式 Shell CLI : hadoop/hdfs fs .... Java API : FileSystem Web UI : HUE/Hadoop自带UI   3) Hadoop的常用操作 HDFS:...(发布于2019-12-28 23:00:06)

Hive函数,

Hive函数, 函数 build-in     cast(value AS TYPE)  cast('100' AS INT)  binary类型==string    binary==string==int    User-Defined Functions (UDFs) built-in的满足不了我们的业务需求 自定义函数 db2/oracle == 云化...(发布于2019-12-28 23:00:02)

Hive 分区,

Hive 分区, 分区表:也是对应于HDFS上的文件夹 1)静态分区     单级分区:CREATE TABLE ruoze_order_partition (                         order_number string,                   ...(发布于2019-12-28 22:59:59)

Hive(DML),

Hive(DML), INSERT OVERWRITE [LOCAL] DIRECTORY directory1   [ROW FORMAT row_format] [STORED AS file_format]    SELECT ... FROM ...     INSERT OVERWRITE  LOCAL DIRECTORY '/home/hadoop/tmp/hivetmp' ROW FORMAT DELIMITED FIELDS TERMINATE...(发布于2019-12-28 22:59:55)

搭建hive,

搭建hive, 首先需要安装mysql 安装mysql移步: http://blog.csdn.net/luyaoguimeng/article/details/50706730 1.下载hive源文件,解压hive文件 tar -zxvf apache -hive - 1.2 .1 -bin . tar . gz 2.修改hive-env.sh cp hive-e...(发布于2019-12-28 22:59:51)

Hive学习指南,

Hive学习指南, 《Hive编程指南》简单总计,相当给自己列一个Hive学习的提纲。...(发布于2019-12-28 02:26:23)

Hive(三):了解Hive的基本操作。,

Hive(三):了解Hive的基本操作。, 为什么80%的码农都做不了架构师?    对Hive的一些基本操作做了个简单的封装,未创建Maven工程,至于需要的包,以及如何获取HiveConnection请参考上...(发布于2019-12-28 02:26:17)

[Hive]Hive分区表新增字段,

[Hive]Hive分区表新增字段, hive (default) desc pms.test_cross_sale_path;OKcol_name data_type commentpath_id string visit_track_id string visit_product_id bigint visit_category_id bigint visit_brand_id bigint rcmd_track_id string rcm...(发布于2019-12-28 02:26:13)

Hive(一):Hive的安装部署,

Hive(一):Hive的安装部署, 为什么80%的码农都做不了架构师?    一.首先安装MYSQL。     在安装Hive前,先安装MySQL,以MySQL作为元数据库,默认的元数据库是内嵌的Derby,但因其有单...(发布于2019-12-28 02:26:08)

hive 内置函数,hive时间函数,hive字符串函数,

hive 内置函数,hive时间函数,hive字符串函数, https://blog.csdn.net/u011138533/article/details/52302483...(发布于2019-12-28 02:26:04)

hive cli,

hive cli, Hive Command line Options Usage: hive [-hiveconf x=y]* [-i filename]* [-f filename|-e query-string] [-S]   -i filename             Initialization Sql from file (executed automatically and silently before any other c...(发布于2019-12-28 02:26:01)

Hive Tips,

Hive Tips, 在Hive中,某些小技巧可以让我们的Job执行得更快,有时一点小小的改动就可以让性能得到大幅提升,这一点其实跟SQL差不多。 首先,Hive != SQL,虽然二者的语法很像,但是H...(发布于2019-12-28 02:25:56)

hive简介,

hive简介, 一、简介 odps是阿里自研的数据仓库,用于 批量结构化数据 处理和计算,类似hive的设计结构。   二、hive的结构 hive 没有索引 ,存在暴力查询;由于其执行通过mapreduce可以并...(发布于2019-12-28 02:20:50)

hive笔记,

hive笔记, su hdfscd ~cd rim_drtdb/ls---sql2hivemonth.sh //按月执行---sql2hive.sh //按天执行---sql2hiveweek.sh //按周执行---error/ //错误日志文件夹,记录粗略---gjd_log/ //日志文件夹,记录详细 import:生产...(发布于2019-12-28 02:20:47)

hive分区,

hive分区, 文章目录 partition 1 分区的增删改查 2修复分区 3动态分区 官网链接地址: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-DropPartitions partition 个人理解: 分区...(发布于2019-12-28 02:20:38)

Hive 题,

Hive 题, Hive的主要作用是什么? Hive是基于hadoop的数据仓库工具,可以将结构化的数据文件映射成一张数据表,并且提供sql查询。相当于mapreduce的客户端 配置hive-env.sh都涉及到哪些属性...(发布于2019-12-26 23:31:41)