hbase启动后使用jconsole监控heap-par eden space，一直增长是什么原因，这段时间后台是在做什么消耗内存

qq_40577432 2017-10-11 11:44:48

...全文

466 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

当时年少春衫薄丶 2019-08-30

打赏
举报

回复

请问怎么用jconsole监控hbase的内存啊

大数据第三季--Hbase（day4)

下文所说的 hbase client 版本，如无特指，则皆为 1.2.3。之前项目中出现堆外内存溢出（排查过程），虽然已经解决了问题，但当时没有深究底层的原理，最近抽空从底层入手，深入研究了 hbase client 读写源码，配合 jmeter 压测特定接口，并使用 mat 等工具分析，最终定位到了 hbase 堆外内存溢出的根本原因，本次就梳理下完整的过程，以及涉及的一些原理，防止以后踩坑。一.溢出现象单台服务器刚发布时 java 进程占用3g，以一天5%...

HBase是Hadoop的生态系统，是建立在Hadoop文件系统（HDFS）之上的分布式、面向列的数据库，通过利用Hadoop的文件系统提供容错能力。如果你需要进行实时读写或者随机访问大规模的数据集的时候，请考虑使用HBase！HBase作为Google Bigtable的开源实现，Google Bigtable利用GFS作为其文件存储系统类似，则HBase利用Hadoop HDFS作为其文件存储系统；Google通过运行MapReduce来处理Bigtable中的海量数据，同样，HBase利用Hadoop

做了几年java程序的同学们都会遇到各种各样程序中出现内存溢出的情况：out of memory：java heap space,out of memory:permGen space，特别是大数据分布式的一些技术如hbase hive hadoop等，设置不对经常就会出现内存溢出。 java的垃圾回收机制虽然比较便捷傻瓜式，但真正遇到内存溢出的问题，又有很多程序员不会调试也不会合理配置jvm的内

GC和GC Tuning GC的基础知识 1.什么是垃圾 C语言申请内存：malloc free C++： new delete c/C++ 手动回收内存 Java: new ？自动内存回收，编程上简单，系统不容易出错，手动释放内存，容易出两种类型的问题：忘记回收多次回收没有任何引用指向的一个对象或者多个对象（循环引用） 2.如何定位垃圾引用计数（ReferenceCount）根可达算法(RootSearching) 3.常见的垃圾回收算法标记清除(mark sweep) - 位

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章