HBase 匹配rowkey神器,hbase匹配rowkey神
最近烦恼了好久,怎么才能进行快速的匹配在HBase中我想要的Result,我尝试过很多方式,不知道是公司建表的原因,还是我代码的问题,匹配速度都奇慢。在踩坑的过程中,我了解到
1、通过rowkey查询才是王道。其余的字段查询,都相当于是HBase的全表遍历一般,十分低效。
2、若无法得到完整rowkey,可以考虑获取前面部分rowkey,比如:rowkey:www.baidu.com_md5加密_时间。这种方式我们如果能得到www.baidu.com_md5加密这段,那么进行匹配速度也是十分可观的。
Scan scan = new Scan();
Scan.setRowPrefixFilter();
table.setResultScanner(scan);
使用这个filter,进行row前半部分匹配。记录下这个坑之后,感觉老大,还包容我这个智障。
究其原因rowkey的存储是以字典序的形式,所以说在检索的时候开头相同的应在同一片中,所以这样就相当于范围查找,速度当然很快
本站文章为和通数据库网友分享或者投稿,欢迎任何形式的转载,但请务必注明出处.
同时文章内容如有侵犯了您的权益,请联系QQ:970679559,我们会在尽快处理。