欢迎投稿

今日深度:

Hive tuning,

Hive tuning,


一篇不错的hive调优

shuffle mapreduce参数

join(mapjoin bucketjoin) 

orc文件格式使用,可以跳过某些数据

io.sort.mb 环形缓冲区

mapper reducer个数

skew数据倾斜

hdfs复制因子和tez缓存的使用

distribute by sort by 和cluster by

dfs-client 

https://www.slideshare.net/ye.mikez/hive-tuning

www.htsjk.Com true http://www.htsjk.com/hive/37638.html NewsArticle Hive tuning, 一篇不错的hive调优 shuffle mapreduce参数 join(mapjoin bucketjoin) orc文件式使用,可以跳过某些数据 io.sort.mb 环形缓冲区 mapper reducer个数 skew数据倾斜 hdfs复制因子和tez缓存的使用 d...
相关文章
    暂无相关文章
评论暂时关闭