濮阳杆衣贸易有限公司

主頁 > 知識庫 > MongoDB最大連接數(shù)設(shè)置失效的異常分析過程與解決方法

MongoDB最大連接數(shù)設(shè)置失效的異常分析過程與解決方法

熱門標簽:杭州人工電銷機器人價格 電銷機器人是什么軟件 云南外呼系統(tǒng) 濟南電銷機器人加盟公司 怎么投訴地圖標注 呼和浩特電銷外呼系統(tǒng)加盟 廣州長安公司怎樣申請400電話 老虎洗衣店地圖標注 蘋果汽車租賃店地圖標注

背景介紹:

查詢MongoDB配置參數(shù),可以知道關(guān)于最大連接數(shù)的參數(shù)是maxConns。但是連接實例后,查看支持的最大連接數(shù),還是默認的819。

說明:最大連接數(shù)是由maxConn (maxIncomingConnections)和操作系統(tǒng)單個進程能打開的最大文件描述符數(shù)總量的80%決定的,取兩個之間的最小值。默認單個進程能打開的最大文件描述符數(shù)為1024,1024*80% = 819.2 取整數(shù)819。所以最大可以支持的并發(fā)連接數(shù)為819。

案例重現(xiàn)

以下為本次測試MongoDB案例配置的參數(shù)。

啟動后查看最大連接數(shù)。

運行命令:db.serverStatus().connections

Current表示當前到實例上正在運行的連接數(shù)。

Available表示當前實例還可以支持的并發(fā)連接數(shù)。

也就是說此實例最大能支持的并發(fā)連接數(shù)為:Current+available=3+816=819.

所以設(shè)置的maxConns參數(shù)無效。所以設(shè)置的maxConns參數(shù)無效!所以設(shè)置的maxConns參數(shù)無效!所以設(shè)置的maxConns參數(shù)無效!

答案求索

此時查看查看網(wǎng)上相關(guān)資料,大部分集中在 Linux系統(tǒng)最大文件描述符數(shù)。查看我們系統(tǒng)配置,此時已經(jīng)是65535了。不是系統(tǒng)最大文件描述符數(shù)限制的了。

轉(zhuǎn)個彎,因為我們是為操作系統(tǒng)是 centos 7 ,所以我們的mongodb服務(wù)是透過systemctl來管理的。那如果是通過service 命令來管理此服務(wù)呢?

測試1 測試用service來管理mongodb 服務(wù) 對最大連接數(shù)的影響

(1) 在/etc/init.d目錄下創(chuàng)建名為mongodbtest0903的服務(wù);

(2) 服務(wù)的配置如下:

(3) 賦予執(zhí)行權(quán)限,然后開啟服務(wù)

(4) 此時查看連接數(shù)為2500(為maxConns參數(shù)值)

(5) 關(guān)閉 mongodb 服務(wù)

以上說明用service 來管理服務(wù),最大連接數(shù)參數(shù)起作用了。

測試2 如果直接用Mongodb command打開呢?

(1) 直接開啟

(2)此時查看連接數(shù)為2500(為maxConns參數(shù)值)

(3)關(guān)閉此服務(wù)

以上說明直接開啟Mongodb服務(wù),最大連接數(shù)參數(shù)起作用了。

通過service和 mongodb命令啟動服務(wù),最大連接數(shù)都是設(shè)置的參數(shù),而通過systemctl來開啟此服務(wù)就變成了默認的819.

探究

我們來具體分析下systemctl 開啟的 mongodb 服務(wù)(此服務(wù)定義為mongodbtest0903)。

(1)查看此服務(wù)的所有配置細節(jié)的命令

systemctl show mongodbtest0903.service

部分細節(jié)如下

此時 LimitNOFILE=4096

(2) 查看此服務(wù)的進程,以及此進程下的資源限制

進程的資源限制

終于看到了 資源限制是1024。

問題1:為什么經(jīng)過systemctl 啟動的mongodb服務(wù)變成了默認的819.

回答:因為systemctl 啟動的服務(wù)進程其最大文件描述符數(shù)變成了1024. 1024*80% = 819.2 取整數(shù)819.

問題2:為什么系統(tǒng)設(shè)置的最大是65525 而 systemctl 變成了1024.

在Centos7系統(tǒng)中,使用Systemd替代了之前的SysV。/etc/security/limits.conf文件的配置作用域縮小了。/etc/security/limits.conf的配置,只適用于通過PAM認證登錄用戶的資源限制,它對systemd的service的資源限制不生效。

其實仔細查看/etc/security/limits.conf文件的注釋,說明了對系統(tǒng)服務(wù)不生效。

解決方案

解決方案,知道了問題所在,針對此問題尋找解決方案相對容易了。

解決方案1:針對單個 systemctl 管理的服務(wù)。

在/lib/systemd/system中找到具體的服務(wù),增加

# (open files)
LimitNOFILE=64000

命令。 修改后為:

重啟服務(wù),此時連接查看最大連接數(shù)為2500,到達設(shè)置的參數(shù)。

解決方案2 網(wǎng)上有種方案是對systemd全局修改。此方案本作者沒有驗證,轉(zhuǎn)述如下,意思是修改/etc/systemd/system.conf 即可:

全局的配置,放在文件/etc/systemd/system.conf和/etc/systemd/user.conf。 同時,也會加載兩個對應(yīng)的目錄中的所有.conf文件/etc/systemd/system.conf.d/*.conf和/etc/systemd/user.conf.d/*.conf
其中,system.conf是系統(tǒng)實例使用的,user.conf用戶實例使用的。一般的sevice,使用system.conf中的配置即可。systemd.conf.d/*.conf中配置會覆蓋system.conf。

DefaultLimitCORE=infinity

DefaultLimitNOFILE=100000

DefaultLimitNPROC=100000

注意:修改了system.conf后,需要重啟系統(tǒng)才會生效。

因為服務(wù)器上systemctl會管理多種服務(wù),為減少對其它服務(wù)的影響,建議在單個服務(wù)上修改,集采用第一種方案。

其他相關(guān)知識

(1)mysql 服務(wù)也會遇到類似問題;

(2)* nofiles - soft limit on the number of file descriptors a process may have;

(3)*soft limit與hard limit的不同:soft limit是真正生效的限制值,而hard limit僅僅是soft limit調(diào)整范圍的一個上限。

連接數(shù)優(yōu)化:

通過serverStatus查詢連接數(shù):

mongo> db.serverStatus().connections

每個連接都是一個線程,需要一個Stack,Linux下缺省的Stack設(shè)置一般比較大:

shell> ulimit -a | grep stack stack size (kbytes, -s) 10240

至于MongoDB實際使用的Stack大小,可以用如下命令確認(單位:K):

shell> cat /proc/$(pidof mongod)/limits | grep stack | awk -F 'size' '{print int($NF)/1024}'

如果Stack過大(比如:10240K)的話沒有意義,簡單對照命令結(jié)果中的Size和Rss:

shell> cat /proc/$(pidof mongod)/smaps | grep 10240 -A 10

所有連接消耗的內(nèi)存加起來會相當驚人,推薦把Stack設(shè)置小一點,比如說1024:

shell> ulimit -s 1024

注:從MongoDB1.8.3開始,MongoDB會在啟動時自動設(shè)置Stack。

總結(jié)

以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,如果有疑問大家可以留言交流,謝謝大家對腳本之家的支持。

您可能感興趣的文章:
  • 解決啟動MongoDB錯誤:error while loading shared libraries: libstdc++.so.6:cannot open shared object file:
  • 關(guān)于Mongodb參數(shù)說明與常見錯誤處理的總結(jié)
  • Mongodb常見錯誤與解決方法小結(jié)(Mongodb中經(jīng)常出現(xiàn)的錯誤)
  • MongoDB錯誤32-bit servers don''t have journaling enabled by default解決方法
  • 解決mongodb在ubuntu下啟動失敗,提示couldn‘t remove fs lock errno:9 Bad file descriptor的錯誤
  • mongodb錯誤tcmalloc: large alloc out of memory, printing stack and exiting解決辦法
  • MongoDB磁盤IO問題的3種解決方法
  • Win10 安裝 MongoDB 3.6.5 失敗的問題及解決方法
  • mongodb 3.4下遠程連接認證失敗的解決方法
  • MongoDb的"not master and slaveok=false"錯誤及解決方法

標簽:自貢 廈門 泰安 興安盟 遼陽 無錫 雞西 玉林

巨人網(wǎng)絡(luò)通訊聲明:本文標題《MongoDB最大連接數(shù)設(shè)置失效的異常分析過程與解決方法》,本文關(guān)鍵詞  MongoDB,最大,連接,數(shù),設(shè)置,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《MongoDB最大連接數(shù)設(shè)置失效的異常分析過程與解決方法》相關(guān)的同類信息!
  • 本頁收集關(guān)于MongoDB最大連接數(shù)設(shè)置失效的異常分析過程與解決方法的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    阳朔县| 石柱| 新竹县| 肃北| 武功县| 育儿| 开阳县| 荔浦县| 靖宇县| 蒙自县| 云和县| 萨嘎县| 吉林市| 年辖:市辖区| 临澧县| 城口县| 岑巩县| 漳浦县| 冕宁县| 克拉玛依市| 古蔺县| 武鸣县| 佛山市| 商城县| 泗水县| 吴江市| 库尔勒市| 乌苏市| 纳雍县| 青阳县| 石狮市| 潼关县| 宣汉县| 连江县| 勐海县| 秭归县| 蓬莱市| 基隆市| 即墨市| 平邑县| 板桥市|