Hbase环境搭建,
Hbase环境搭建, 0. 软件版本下载 http://mirror.bit.edu.cn/apache/hbase/ 1. 集群环境 Master 172.16.11.97 Slave1 172.16.11.98 Slave2 172.16.11.99 2. 下载软件包 #Master wget http://archive.apache.org/dist/hbase/0.98.24/hbase...(发布于2020-02-23 23:33:12)
hbase 运维,
hbase 运维, 1. 启动问题 ( IBM_JAVA ): Caused by: java.lang.NoSuchFieldError: IBM_JAVA 可以 env 命令查看 JAVA_HOME 和 HADOOP_HOME 是否配置,配置了基本没事。这个也会在hbase shell里出现,如果不配置...(发布于2020-02-22 23:11:23)
hbase集群部署,
hbase集群部署, 集群架构 集群相关概念 Client HBase Client使用HBase的RPC机制与HMaster和HRegionServer进行通信,对于管理类操作,Client与HMaster进行RPC;对于数据读写类操作,Client与HRegionServer进...(发布于2020-02-22 23:10:58)
hbase集群配置,
hbase集群配置, 1:前提是搭建好zk集群 配置环境变量vim /etc/profile #内容 export HBASE_HOME=/usr/local/src/hbase-1.1.3 export PATH=$HBASE_HOME/bin:$PATH #使立即生效 source /etc/profile 配置hbase-env.sh vim hbase-...(发布于2020-02-22 23:10:54)
hbase,
hbase, 要导入大量数据,Hbase的BulkLoad是必不可少的,在导入历史数据的时候,我们一般会选择使用BulkLoad方式,我们还可以借助Spark的计算能力将数据快速地导入。 使用方法 compile gro...(发布于2020-02-22 23:10:50)
HBase安装配置,
HBase安装配置, 在某一台上解压hbase的压缩文件,如在192.168.15.5 tar –zxvf hbase-1.2.0-bin.tar.gz 配置添加环境变量: hbase export HBASE_HOME=/usr/tools/hbase-1.2.0 export PATH=$PATH:$HBASE_HOME/bin 使环境变量...(发布于2020-02-22 23:10:46)
HBase性能优化,
HBase性能优化, 背景 hbase主集群在生产环境已稳定运行有1年半时间,最大的单表region数已达7200多个, 每天新增入库量就有百亿条, 对hbase的认识经历了懵懂到熟的过程。为了应...(发布于2020-02-22 23:10:42)
hbase的概述,
hbase的概述, 文章转载于:https://blog.csdn.net/qq_37095882/article/details/78129158 感谢原创!!!! 一、hbase的概述 概述 HBase是一个构建在HDFS上的分布式列存储系统; HBase是基于Google BigTable模型...(发布于2020-02-22 23:10:38)
Hbase常用操作,
Hbase常用操作, 文章目录 绪论 1、建表 2、查看表 3、修改表 4、删除表 5、启用表 6、禁用表 7、测试表 8、插入数据 9、查询数据 9、删除数据 10、统计表记录数 绪论 进入shell,命令...(发布于2020-02-22 23:10:33)
HBase学习笔记,
HBase学习笔记, 一、HBase简介 HBase(Hadoop Database)是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase利用...(发布于2020-02-22 23:10:29)
HBase架构,
HBase架构, 1 Client Client包含了访问Hbase的接口,另外Client还维护了对应的cache来加速Hbase的访问,比如cache的.META.元数据的信息。 2 Zookeeper HBase通过Zookeeper来做master的高可用、RegionSer...(发布于2020-02-22 23:10:22)
HBase学习,
HBase学习, 参考网址http://wuchong.me/blog/2015/04/06/spark-on-hbase-new-api/ 综合代码 zonghhttps://www.mapr.com/developercentral/code spark + kafka http://henning.kropponline.de/2015/04/26/spark-streaming-with-kafka-hbas...(发布于2020-02-21 23:42:38)
HBase Replication,
HBase Replication, 一、文档说明 测试HBase Replication,测试HBase主从集群间复制。 操作示意图 二、操作步骤 ####Master-Slave模式 BEGIN #### ##HBase Master集群上执行 add_peer '1', " 6.hadoop.com:2181:/hbas...(发布于2020-02-21 23:42:34)
HBase源码研究,
HBase源码研究, 远程通信RPC、反射、动态代理 参考url http://blog.csdn.net/liuxiaochen123/article/details/7788209...(发布于2020-02-21 23:42:30)
Hbase数据导入导出,
Hbase数据导入导出, 平时用于从生产环境hbase到导出数据到测试环境。 导入数据: import java.io.BufferedReader; import java.io.File; import java.io.FileReader; import java.io.IOException; import java.util.ArrayLi...(发布于2020-02-21 23:42:26)
HBASE安装过程,
HBASE安装过程, 环境 hbase-0.90.3 hadoop-0.20.2 一开始我用的是hadoop-0.21.0,搞了半天搞不好,日志里面报错说连接的时候出错 2011-06-15 16:05:32,239 FATAL org.apache.hadoop.hbase.master.HMaster: Unhandled e...(发布于2020-02-21 23:42:22)
HBase集群搭建,
HBase集群搭建, HBase集群搭建 搭建环境:假设我们的linux环境已经准备好,包括网络、JDK、防火墙、主机名、免密登录等都没有问题,而且一定要有zookeeper。下面我们用3台linux虚拟机...(发布于2020-02-21 23:42:18)
hbase过滤器,
hbase过滤器, HBase过滤器(filter)提供了非常强大的特性来帮助用户提高其处理表中的数据的效率。用户不仅可以使用HBase中预定义好的过滤器,而且可以实现自定义的过滤器。 1.行过滤器...(发布于2020-02-21 23:42:14)
hbase安装配置,
hbase安装配置, base配置 下载:hbase-0.96.2-hadoop2-bin.tar.gz [root@db96 ~]# wget http://apache.dataguru.cn/hbase/hbase-0.96.2/hbase-0.96.2-hadoop2-bin.tar.gz [root@db96 ~]# tar -zxvf hbase-0.96.2-hadoop2-bin.tar.gz -C /usr/loc...(发布于2020-02-21 23:42:10)
HBase 系统架构,
HBase 系统架构, HBase是Apache Hadoop的数据库,能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的,分布式的,多版本的,面向列的存储...(发布于2020-02-21 23:42:06)