请教hbase getscanner 慢的问题，第一次扫描大约300ms

applelemon 2016-09-12 11:49:40

大家好，
我的代码是这个结构,有些参数我先省略了

Table table = new Htable();
Scan scan1 = new Scan();
scan1.setstartrow();
scan1.setStopRow();
ResultScanner rs1 = table.getScanner(scan1 );//耗时300ms

然后

Scan scan2 = new Scan();
scan2.setstartrow();
scan2.setStopRow();
ResultScanner rs12 = table.getScanner(scan2);//耗时有时不到10ms，有时40,50ms

这是在java main方法中测试的，请教一下，我的问题出在哪里？

...全文

1973 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

qq_34152036 2019-01-11

打赏
举报

回复

setstartrow()setStopRow() 里面每设置起始结束rowkey 还可以设置 scan.setCaching(5000)加快查询速度

通过慢sql分析的学习，了解什么是慢sql，以及慢SQL会引起那些性能问题。清楚慢sql日志的设置，然后再通过慢sql分析工具的学习，清楚慢sql分析的步骤和流程。慢sql分析工具：mysqldumpslow工具、explain工具、profile工具、Optimizer Trace工具。提供课程中所使用的sql语句。课程内容：第一章：课程简介1、课程介绍2、课程大纲第二章：慢sql简介1、慢sql简介2、慢sql会引起的问题第三章：慢日志的设置1、慢sql的分析流程2、慢日志参数理解3、慢日志参数设置：第1种方式：my.ini文件设置4、慢日志参数设置：第2种方式：sql脚本设置5、慢日志参数设置-效果验证第四章：如何发现慢sql1、如何发现慢sql：第1种方式：慢日志文件2、如何发现慢sql：第2种方式：mysql库的slow_log表第五章：慢sql分析工具1、慢sql提取-mysqldumpslow工具-使用方法2、慢sql提取-mysqldumpslow工具-操作实战3、慢sql的执行计划分析-explain分析-执行计划结果说明4、慢sql的执行计划分析-explain分析-索引介绍+type类型举例5、慢sql的资源开销分析-profile分析-分析步骤6、慢sql的资源开销分析-profile分析-show profile执行阶段说明7、慢sql的资源开销分析-profile分析-完整列表说明+操作实战8、慢sql的跟踪分析-Optimizer Trace分析-分析步骤9、慢sql的跟踪分析-Optimizer Trace表的介绍10、索引失效场景举例第六章：慢日志清理1、慢日志清理

扫描操作的使用跟get()方法非常相似。同样，和其他函数类似，这里也提供了Scan类。但是由于扫描的工作方式类似于迭代器，所以用户无需调用scan()方法创建实例，只需调用HTable的getScanner()方法，此方法在返回真正的扫描器(scanner)实例的同时，用户也可以使用它迭代获取数据。可用方法如下: ResultScanner getScanner(Sc...

Hbase 客户端Scan 标签（空格分隔）： Hbase HBase扫描操作Scan 1 介绍扫描操作的使用和get()方法类似。同样，和其他函数类似，这里也提供了Scan类。但是由于扫描工作方式类似于迭代器，所以用户无需调用scan()方法创建实例,只需要调用HTable的getScanner()方法，此方法才是返回真正的扫描器(scanner)实例的同时，用户也可以使用它迭代获...

HBase基本的CRUD操作就不多介绍了，无非就是Put，Get，Delete三个类的运用。现在看一下扫描技术，这种技术类似于关系型数据库的游标（cursor），并利用到了HBase底层顺序存储的特性。使用扫描的一般步骤是： 1、创建Scan实例 2、为Scan实例增加扫描的限制条件 3、调用HTable的getScanner()方法获取ResultScanner对象 4、迭代Resul

933

社区成员

653

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章