隨筆 - 41  文章 - 7  trackbacks - 0
          <2016年7月>
          262728293012
          3456789
          10111213141516
          17181920212223
          24252627282930
          31123456

          常用鏈接

          留言簿

          隨筆分類

          隨筆檔案

          搜索

          •  

          最新評論

          閱讀排行榜

          評論排行榜

          原文:http://www.rabbitmq.com/memory.html
          RabbitMQ服務(wù)器在啟動時以及abbitmqctl set_vm_memory_high_watermark fraction 執(zhí)行時,會檢查計算機的RAM總大小. 默認情況下下, 當(dāng) RabbitMQ server 的使用量超過RAM的40% ,它就會發(fā)出內(nèi)存警報,并阻塞所有連接. 一旦內(nèi)存警報清除 (如,服務(wù)器將消息轉(zhuǎn)存于磁盤,或者將消息投遞給clients),服務(wù)又地恢復(fù).
          默認內(nèi)存閥值設(shè)置為已安裝RAM的40%. 注意這并不會阻止RabbitMQ server使用內(nèi)存量超過40%, 它只是為了壓制發(fā)布者. Erlang的垃圾回收器最壞情況下,可使用配置內(nèi)存的2倍(默認情況下t, RAMr的80%). 因此強制建議開啟OS swap或page files .
          32位架構(gòu)傾向于每一個進程有2GB的內(nèi)存限制. 64位架構(gòu)的一般實現(xiàn)(i.e. AMD64 和 Intel EM64T) 只允許每個進程為256TB. 64-位 Windows 限制為8TB. 但是,請注意,即使是64位操作系統(tǒng)下,一個32位的過程往往只有一個2GB的最大地址空間。
          配置內(nèi)存閥值
          內(nèi)存閥值可通過編輯configuration file來配置.下面的例子將閥值設(shè)為默認值0.4:
          [{rabbit, [{vm_memory_high_watermark, 0.4}]}].
          默認值0.4 代表的是已安裝RAM的 40% , 有時候還更小.如:在 32位平臺中,如果你安裝有4GB RAM , 4GB 的40% 是 1.6GB, 但是 32-位 Windows 正常情況下限制進程為2GB,因此實際閥值是2GB的40% (即820MB).
          另外, 內(nèi)存閥值也可以設(shè)置為絕對值. 下面的例子將閥值設(shè)為了1073741824 字節(jié) (1024 MB):
          [{rabbit, [{vm_memory_high_watermark, {absolute, 1073741824}}]}].
          同例, 也可使用內(nèi)存單位:
          [{rabbit, [{vm_memory_high_watermark, {absolute, "1024MiB"}}]}].
          如果絕對上限大于了安裝的RAM可用的虛擬地址空間, 閥值上限會略小.
          當(dāng)RabbitMQ服務(wù)器啟動時,內(nèi)存限制將追加到RABBITMQ_NODENAME.log 文件中:
          =INFO REPORT==== 29-Oct-2009::15:43:27 === Memory limit set to 2048MB.
          內(nèi)存限制也可以使用rabbitmqctl status命令查詢
          其閥值也可以在broker運行時,通過rabbitmqctl set_vm_memory_high_watermark fraction 命令或 rabbitmqctl set_vm_memory_high_watermark absolute memory_limit 命令修改. 內(nèi)存單位也可以在命令中使用. 此命令會在broker重啟后生效. 當(dāng)執(zhí)行此命令時,內(nèi)存限制可能會改變熱插拔RAM,而不會發(fā)生報警,這是因為需要全部數(shù)量的系統(tǒng)RAM.
          禁止所有發(fā)布
          其值為0時,會立即觸發(fā)報警并禁用所有發(fā)布 (當(dāng)需要禁用全局發(fā)布時,這可能是有用的); use rabbitmqctl set_vm_memory_high_watermark 0.
          限制的地址空間
          當(dāng)在64位操作系統(tǒng)中運行32位 Erlang VM時,(or a 32 bit OS with PAE), 可用地址內(nèi)存是受限制的. 服務(wù)器探測到后會記錄像下邊的日志消息:
          =WARNING REPORT==== 19-Dec-2013::11:27:13 === Only 2048MB of 12037MB memory usable due to limited address space. Crashes due to memory exhaustion are possible - see http://www.rabbitmq.com/memory.html#address-space
          內(nèi)存報警系統(tǒng)是不完美的.雖然停止發(fā)布通常會防止任何進一步的內(nèi)存使用,但可能有其他東西繼續(xù)增加內(nèi)存使用。通常情況下,當(dāng)這種情況發(fā)生時,物理內(nèi)存耗盡,操作系統(tǒng)將開始交換。但是當(dāng)運行一個有限的地址空間,超過限制的運行會導(dǎo)致虛擬機崩潰。
          因此強制建議在在64位操作系統(tǒng)上運行64位的Erlang VM.
          配置分頁閾值
          在broker達到最高水位阻塞發(fā)布者之前,它會嘗試將隊列內(nèi)容分頁輸出到磁盤上來釋放內(nèi)存. 持久化和瞬時消息都會分頁輸出 (已經(jīng)在磁盤上的持久化消息會被趕出內(nèi)存).
          默認情況下,在達最高水位的50%時,就會發(fā)生這種情況. (即,默認最高水位為0.4, 這會在內(nèi)存使用達到20%時就會發(fā)生). 要修改此值,可修改vm_memory_high_watermark_paging_ratio 配置的0.5默認值. 例如:
          [{rabbit, [{vm_memory_high_watermark_paging_ratio, 0.75}, {vm_memory_high_watermark, 0.4}]}].
          上面的配置表示在內(nèi)存使用達到30%時,就會啟動,40%的時候會阻塞發(fā)布者.
          也可以將vm_memory_high_watermark_paging_ratio 值設(shè)為大于1.0的值.在這種情況下,隊列不會把它的內(nèi)容分頁到磁盤上.如果這引起了內(nèi)存報警關(guān)閉,那么生產(chǎn)者會如上面預(yù)期的一樣被阻塞.
          未確認的平臺
          如果RabbitMQ服務(wù)器不能識別你的系統(tǒng),它將在RABBITMQ_NODENAME.log 文件中追加警告.
          然后它會假設(shè)安裝了超過了1GB的RAM:
          =WARNING REPORT==== 29-Oct-2009::17:23:44 === Unknown total memory size for your OS {unix,magic_homebrew_os}. Assuming memory size is 1024MB.
          在這種情況下,vm_memory_high_watermark 配置值假設(shè)為1GB RAM. 在 vm_memory_high_watermark 默認設(shè)為 0.4的情況下, RabbitMQ的內(nèi)存閥值設(shè)為了410MB, 因此當(dāng)RabbitMQ使用了多于410M內(nèi)存時,它會阻塞生產(chǎn)者.因此當(dāng)RabbitMQ不能識別你的平臺時,如果你實際有8GB RAM,并且你想讓RabbitMQ內(nèi)存使用量超過3GB阻塞生產(chǎn)者,你可以設(shè)置vm_memory_high_watermark為3.
          推薦RAM 水位設(shè)置,可參考Production Checklist.

          posted on 2016-07-30 15:05 胡小軍 閱讀(7972) 評論(0)  編輯  收藏 所屬分類: RabbitMQ
          主站蜘蛛池模板: 隆子县| 扎兰屯市| 江口县| 观塘区| 济源市| 改则县| 平谷区| 万荣县| 乳源| 航空| 石渠县| 临汾市| 灵武市| 临澧县| 东台市| 达孜县| 庐江县| 专栏| 山东省| 金山区| 永州市| 榆林市| 治县。| 庆城县| 科尔| 泸溪县| 珠海市| 洪雅县| 吴川市| 文昌市| 乐昌市| 抚州市| 吉林省| 常州市| 永清县| 冕宁县| 凌云县| 南和县| 白沙| 霍邱县| 北川|