成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

Weblogic診斷之文件句柄泄露問題

IT那活兒 / 1067人閱讀
Weblogic診斷之文件句柄泄露問題

點擊上方“IT那活兒”，關(guān)注后了解更多內(nèi)容，不管IT什么活兒，干就完了！??！



問題描述


有時候業(yè)務(wù)比較繁忙時，就會出現(xiàn)如下問題：
too many open files：顧名思義即打開過多文件數(shù)。
不過這里的files不單是文件的意思，也包括打開的通訊鏈接(比如socket)，正在監(jiān)聽的端口等等，所以有時候也可以叫做句柄(handle)，這個錯誤通常也可以叫做句柄數(shù)超出系統(tǒng)限制。


故障癥狀


1. 進(jìn)程報: I/O Exception錯誤，進(jìn)程在執(zhí)行文件I0時達(dá)到了文件描述符極限，并影響I0操作時，就會報此異常。
2. 服務(wù)監(jiān)聽異常，服務(wù)不可用。
3. 進(jìn)程報：SocketException錯誤，進(jìn)程打開的文件過多時，在打開新套接字連接時，可能就達(dá)到了文件描述符極限，如果錯誤影響到底層的TCP協(xié)議，就會報Socket Exception錯誤。


解決方法


優(yōu)化句柄限制：
系統(tǒng)默認(rèn)的ulimit對文件打開數(shù)量的限制是1024，修改/etc/security/limits.conf并加入以下配置，永久生效。
* soft nofile 65535 
* hard nofile 65535
硬限制是實際的限制，而軟限制，是warnning限制，超過這個數(shù)值只會做出warning。
注意：
1）這個限制是針對單個用戶的限制 ；
2）這個限制不會改變之前已經(jīng)運行了的程序的限制 。


利用lsof探查句柄問題


查找文件句柄問題的時候，還有一個很實用的程序lsof。可以很方便看到某個進(jìn)程開了那些句柄，也可以看到某個文件/目錄被什么進(jìn)程占用了。
例如分析句柄數(shù)，查找原因，這是解決問題最根本的辦法。
那么如何分析？那就需要用到lsof這個命令了。

  • 統(tǒng)計各進(jìn)程打開句柄數(shù)：lsof -n|awk {print $2}|sort|uniq -c|sort -nr

  • 統(tǒng)計各用戶打開句柄數(shù)：lsof -n|awk {print $3}|sort|uniq -c|sort -nr

  • 統(tǒng)計各命令打開句柄數(shù)：lsof -n|awk {print $1}|sort|uniq -c|sort -nr

找出可疑的句柄泄露點，根據(jù)以上統(tǒng)計信息分析查找句柄泄露點，反饋開發(fā)廠商排查是否存在句柄泄露。


案例分析


1. 問題現(xiàn)象
某月某日監(jiān)控探測發(fā)現(xiàn)java化營業(yè)渠道prod中心部分server不可用。檢查發(fā)現(xiàn)weblogic控制臺無法登陸、wlst方式無法訪問Server。
2. 排查過程
1）使用netstat -na查看端口監(jiān)聽情況：
發(fā)現(xiàn)問題主機對應(yīng)的server端口監(jiān)控不存在，如上圖 10202在10.243.x.x IP 上的監(jiān)聽不存在了。
 2）核查WebLogic Server日志是否存在異常報錯：
發(fā)現(xiàn)server日志中存在如上報錯，Too many open files (Accept failed)，導(dǎo)致監(jiān)聽異常。
3）使用lsof查看文件句柄使用情況：
如上圖，prod中心應(yīng)用打開句柄數(shù)明顯很高
分析lsof的結(jié)果：
發(fā)現(xiàn)進(jìn)程號 34034 中打開的 coherence.properties  文件有：9209個。而當(dāng)前WebLogic Server中配置的最大。
文件句柄數(shù)是10240，進(jìn)程號34034打開的文件句柄數(shù)已達(dá)到10755。懷疑存在句柄泄露。
3. 處置辦法
1）應(yīng)用代碼修復(fù)前，我側(cè)建議將weblogic句柄數(shù)設(shè)置參數(shù)做以下調(diào)整，以緩解問題對業(yè)務(wù)造成的影響。當(dāng)前句柄數(shù)設(shè)置為 10240   ，調(diào)整為：30720。
2）由于存在較多監(jiān)聽不在的情況，對現(xiàn)有連接暫時無影響，但是新的連接會無法連接上來，重啟應(yīng)用暫時恢復(fù)應(yīng)用。
3）通知業(yè)務(wù)側(cè)核查為何會存在coherence.properties文件大量打開而沒有關(guān)閉的情況。
4）經(jīng)開發(fā)商核實是產(chǎn)品中心打開緩存公共方法有問題，打開后未進(jìn)行關(guān)閉。代碼已修復(fù)上線。




本文作者：程紅

本文來源：IT那活兒（上海新炬王翦團(tuán)隊）

文章版權(quán)歸作者所有，未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址：http://systransis.cn/yun/129621.html

相關(guān)文章

  • 內(nèi)存泄露從入門到精通三部曲之基礎(chǔ)知識篇

    摘要：騰訊特約作者姚潮生首先以一個內(nèi)存泄露實例來開始本節(jié)基礎(chǔ)概念的內(nèi)容。堆內(nèi)存用于存放所有由創(chuàng)建的對象內(nèi)容包括該對象其中的所有成員變量和數(shù)組?；氐轿覀兊膯栴}，為什么內(nèi)存會泄露堆內(nèi)存中的長生命周期的對象持有短生命周期對象的強軟引用，盡管 騰訊Bugly特約作者： 姚潮生 首先以一個內(nèi)存泄露實例來開始本節(jié)基礎(chǔ)概念的內(nèi)容。 實例1：單例導(dǎo)致內(nèi)存對象無法釋放而泄露 showImg(http://i....

    nicercode 評論0 收藏0

  • DBASK問答集萃（2）

    摘要：新晉技術(shù)專家下面是墨天輪部分新晉的技術(shù)專家。大家可以點擊往期閱讀墨天輪技術(shù)專家邀請函了解詳情，申請成為我們的技術(shù)專家，加入專家團(tuán)隊，與我們一起創(chuàng)建一個開放互助的數(shù)據(jù)庫技術(shù)社區(qū)。新關(guān)聯(lián)公眾號墨天輪是一個開放互助的數(shù)據(jù)庫技術(shù)社區(qū)。 引言 近期我們在DBASK小程序增加了數(shù)據(jù)庫 MongoDB、Redis、 Elasticsearch、DB2、Weblogic 等新的的專題欄目和一些新的技術(shù)...

    liuchengxu 評論0 收藏0

  • 2018先知白帽大會 | 議題解讀

    摘要：摘要今年的先知白帽大會，與會者將能夠親身感受到非常多有趣的技術(shù)議題，如在國際賽事中屢奪佳績的團(tuán)隊，其隊長將親臨現(xiàn)場，分享穿針引線般的漏洞利用藝術(shù)。從數(shù)據(jù)視角探索安全威脅阿里云安全工程師議題解讀本議題討論了數(shù)據(jù)為安全人員思維方式帶來的變化。 摘要： 今年的先知白帽大會，與會者將能夠親身感受到非常多有趣的技術(shù)議題，如HITCON在國際賽事中屢奪佳績的CTF團(tuán)隊，其隊長Orange將親臨現(xiàn)場...

    Hydrogen 評論0 收藏0

發(fā)表評論

0條評論

IT那活兒

男|高級講師

TA的文章

閱讀更多
最新活動
閱讀需要支付1元查看
<