首頁 > 資料庫 > mysql教程 > 内存回收与hbase

内存回收与hbase

WBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWBOYWB
發布: 2016-06-07 15:29:20
原創
1175 人瀏覽過

1.3.1.1 内存回收导致的程序卡顿 Todd Lipcon 描述了2种常见的导致hbase卡顿的内存回收情况,尤其在加载数据到hbase的情况下。这两种情况分别是:cms内存回收失败、老年代堆内存碎片严重。 对于第一种情况,可以在启动cms的时候加入参数- XX:CMSInitiatingOc

1.3.1.1 内存回收导致的程序卡顿

Todd Lipcon 描述了2种常见的导致hbase卡顿的“内存回收情况”,尤其在加载数据到hbase的情况下。这两种情况分别是:cms内存回收失败、老年代堆内存碎片严重。

对于第一种情况,可以在启动cms的时候加入参数-XX:CMSInitiatingOccupancyFraction,将该参数调小为60~70,即当对老年代堆内存使用到60~70时进行cms内存回收,提升内存回收频率。

<code class="code">对于第二种情况,Todd提到一种措施,设置参数 <code class="code">hbase.hregion.memstore.mslab.enabled为true,为每一个memstore开辟一个单独的缓存空间。隐患:mslab(A memstore-local allocation buffer)的开启会导致每个store产生至少一个2MB的buffer。也就是说如果每台机器有2000个store,默认直接会占用至少4G的内存空间,当4G写满了将占用8G。因此对于store非常多的应用有可能会发生OOM,需要谨慎。

<code class="code"><code class="code">个人建议

<code class="code"><code class="code">1、hbase默认内存为1G,最好放大 2、使用cms回收,

<code class="code"><code class="code">export SERVER_GC_OPTS="-XX:CMSInitiatingOccupancyFraction=80 -XX:+UseParNewGC -XX:+UseConcMarkSweepGC"

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
最新問題
保存hosts,我怎麼是一個另存為?
來自於 1970-01-01 08:00:00
0
0
0
儲存hosts時只能另存為是怎麼回事?
來自於 1970-01-01 08:00:00
0
0
0
保存會報錯,保存不了
來自於 1970-01-01 08:00:00
0
0
0
vim裡如何修改dd預設儲存的暫存器
來自於 1970-01-01 08:00:00
0
0
0
站長工具箱,開啟hosts提示另存,另存哪裡
來自於 1970-01-01 08:00:00
0
0
0
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板