欢迎投稿

今日深度:

Hbase环境搭建,

Hbase环境搭建, 0. 软件版本下载 http://mirror.bit.edu.cn/apache/hbase/ 1. 集群环境 Master 172.16.11.97 Slave1 172.16.11.98 Slave2 172.16.11.99 2. 下载软件包 #Master wget http://archive.apache.org/dist/hbase/0.98.24/hbase...(发布于2020-02-23 23:33:12)

hbase 运维,

hbase 运维, 1. 启动问题 ( IBM_JAVA ): Caused by: java.lang.NoSuchFieldError: IBM_JAVA 可以 env 命令查看  JAVA_HOME 和 HADOOP_HOME 是否配置,配置了基本没事。这个也会在hbase shell里出现,如果不配置...(发布于2020-02-22 23:11:23)

hbase集群部署,

hbase集群部署, 集群架构 集群相关概念 Client HBase Client使用HBase的RPC机制与HMaster和HRegionServer进行通信,对于管理类操作,Client与HMaster进行RPC;对于数据读写类操作,Client与HRegionServer进...(发布于2020-02-22 23:10:58)

hbase集群配置,

hbase集群配置, 1:前提是搭建好zk集群 配置环境变量vim /etc/profile #内容 export HBASE_HOME=/usr/local/src/hbase-1.1.3 export PATH=$HBASE_HOME/bin:$PATH #使立即生效 source /etc/profile 配置hbase-env.sh vim hbase-...(发布于2020-02-22 23:10:54)

hbase,

hbase, 要导入大量数据,Hbase的BulkLoad是必不可少的,在导入历史数据的时候,我们一般会选择使用BulkLoad方式,我们还可以借助Spark的计算能力将数据快速地导入。 使用方法 compile gro...(发布于2020-02-22 23:10:50)

HBase安装配置,

HBase安装配置, 在某一台上解压hbase的压缩文件,如在192.168.15.5 tar –zxvf hbase-1.2.0-bin.tar.gz 配置添加环境变量: hbase export HBASE_HOME=/usr/tools/hbase-1.2.0 export PATH=$PATH:$HBASE_HOME/bin 使环境变量...(发布于2020-02-22 23:10:46)

HBase性能优化,

HBase性能优化, 背景       hbase主集群在生产环境已稳定运行有1年半时间,最大的单表region数已达7200多个, 每天新增入库量就有百亿条, 对hbase的认识经历了懵懂到熟的过程。为了应...(发布于2020-02-22 23:10:42)

hbase的概述,

hbase的概述, 文章转载于:https://blog.csdn.net/qq_37095882/article/details/78129158 感谢原创!!!! 一、hbase的概述 概述 HBase是一个构建在HDFS上的分布式列存储系统; HBase是基于Google BigTable模型...(发布于2020-02-22 23:10:38)

Hbase常用操作,

Hbase常用操作, 文章目录 绪论 1、建表 2、查看表 3、修改表 4、删除表 5、启用表 6、禁用表 7、测试表 8、插入数据 9、查询数据 9、删除数据 10、统计表记录数 绪论   进入shell,命令...(发布于2020-02-22 23:10:33)

HBase学习笔记,

HBase学习笔记, 一、HBase简介 HBase(Hadoop Database)是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase利用...(发布于2020-02-22 23:10:29)

HBase架构,

HBase架构, 1  Client Client包含了访问Hbase的接口,另外Client还维护了对应的cache来加速Hbase的访问,比如cache的.META.元数据的信息。 2  Zookeeper HBase通过Zookeeper来做master的高可用、RegionSer...(发布于2020-02-22 23:10:22)

HBase学习,

HBase学习, 参考网址http://wuchong.me/blog/2015/04/06/spark-on-hbase-new-api/   综合代码 zonghhttps://www.mapr.com/developercentral/code   spark + kafka  http://henning.kropponline.de/2015/04/26/spark-streaming-with-kafka-hbas...(发布于2020-02-21 23:42:38)

HBase Replication,

HBase Replication, 一、文档说明 测试HBase Replication,测试HBase主从集群间复制。 操作示意图 二、操作步骤 ####Master-Slave模式 BEGIN #### ##HBase Master集群上执行 add_peer '1', " 6.hadoop.com:2181:/hbas...(发布于2020-02-21 23:42:34)

HBase源码研究,

HBase源码研究, 远程通信RPC、反射、动态代理 参考url http://blog.csdn.net/liuxiaochen123/article/details/7788209...(发布于2020-02-21 23:42:30)

Hbase数据导入导出,

Hbase数据导入导出, 平时用于从生产环境hbase到导出数据到测试环境。 导入数据: import java.io.BufferedReader; import java.io.File; import java.io.FileReader; import java.io.IOException; import java.util.ArrayLi...(发布于2020-02-21 23:42:26)

HBASE安装过程,

HBASE安装过程, 环境 hbase-0.90.3 hadoop-0.20.2 一开始我用的是hadoop-0.21.0,搞了半天搞不好,日志里面报错说连接的时候出错 2011-06-15 16:05:32,239 FATAL org.apache.hadoop.hbase.master.HMaster: Unhandled e...(发布于2020-02-21 23:42:22)

HBase集群搭建,

HBase集群搭建, HBase集群搭建   搭建环境:假设我们的linux环境已经准备好,包括网络、JDK、防火墙、主机名、免密登录等都没有问题,而且一定要有zookeeper。下面我们用3台linux虚拟机...(发布于2020-02-21 23:42:18)

hbase过滤器,

hbase过滤器, HBase过滤器(filter)提供了非常强大的特性来帮助用户提高其处理表中的数据的效率。用户不仅可以使用HBase中预定义好的过滤器,而且可以实现自定义的过滤器。 1.行过滤器...(发布于2020-02-21 23:42:14)

hbase安装配置,

hbase安装配置, base配置  下载:hbase-0.96.2-hadoop2-bin.tar.gz [root@db96 ~]# wget http://apache.dataguru.cn/hbase/hbase-0.96.2/hbase-0.96.2-hadoop2-bin.tar.gz [root@db96 ~]# tar -zxvf hbase-0.96.2-hadoop2-bin.tar.gz -C /usr/loc...(发布于2020-02-21 23:42:10)

HBase 系统架构,

HBase 系统架构, HBase是Apache Hadoop的数据库,能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的,分布式的,多版本的,面向列的存储...(发布于2020-02-21 23:42:06)