本文主要記錄一次tomcat進(jìn)程，因TCP連接過(guò)多導(dǎo)致CPU占用過(guò)高的問(wèn)題排查記錄。 問(wèn)題描述 linux系統(tǒng)下，一個(gè)tomcat web服務(wù)的cpu占用率非常高，top顯示結(jié)果超過(guò)200%。請(qǐng)求無(wú)法響應(yīng)。反復(fù)重啟依然同一個(gè)現(xiàn)象。 問(wèn)題排查 1、獲取進(jìn)程信息 通過(guò)jdk提供的jps命令可以快速查出jvm進(jìn)程， jps pid 2、查看jstack信息 jstack pid 發(fā)現(xiàn)存在大量log4j線程block，處于waiting lock狀態(tài) org.apache.log4j.Category.callAppenders(org.apache.log4j.spi.LoggingEvent) @bci=12, line=201 (Compiled frame) 搜索相關(guān)信息，發(fā)現(xiàn)log4j 1.x版本存在死鎖問(wèn)題。 發(fā)現(xiàn)問(wèn)題，于是調(diào)整log4j配置，僅打開(kāi)error級(jí)別日志，重啟tomcat。此時(shí)stack中block線程消失，但進(jìn)程cpu占用率依然高漲。 3、進(jìn)一步排查 分析每個(gè)線程的cpu占用量，此處需要引入一個(gè)大神貢獻(xiàn)的腳本，計(jì)算java進(jìn)程中，每個(gè)線程的cpu使用量。 #!/bin/bash
typeset top=${1:-10}
typeset pid=${2:-$(pgrep -u $USER java)}
typeset tmp_file=/tmp/java_${pid}_$$.trace
$JAVA_HOME/bin/jstack $pid > $tmp_file
ps H -eo user,pid,ppid,tid,time,%cpu --sort=%cpu --no-headers\
| tail -$top\
| awk -v "pid=$pid" '$2==pid{print $4"\t"$6}'\
| while read line;
do
typeset nid=$(echo "$line"|awk '{printf("0x%x",$1)}')
typeset cpu=$(echo "$line"|awk '{print $2}')
awk -v "cpu=$cpu" '/nid='"$nid"'/,/^$/{print $0"\t"(isF++?"":"cpu="cpu"%");}' $tmp_file
done
rm -f $tmp_file腳本適用范圍 因?yàn)閜s中的%CPU數(shù)據(jù)統(tǒng)計(jì)來(lái)自于/proc/stat，這個(gè)份數(shù)據(jù)并非實(shí)時(shí)的，而是取決于OS對(duì)其更新的頻率，一般為1S。所以你看到的數(shù)據(jù)統(tǒng)計(jì)會(huì)和jstack出來(lái)的信息不一致也就是這個(gè)原因～但這份信息對(duì)持續(xù)LOAD由少數(shù)幾個(gè)線程導(dǎo)致的問(wèn)題排查還是非常給力的，因?yàn)檫@些固定少數(shù)幾個(gè)線程會(huì)持續(xù)消耗CPU的資源，即使存在時(shí)間差，反正也都是這幾個(gè)線程所導(dǎo)致。 除了這個(gè)腳本，簡(jiǎn)單點(diǎn)兒的方法則是，查出進(jìn)程id后，通過(guò)如下命令查看該進(jìn)程中每個(gè)線程的資源使用情況 top -H -p pid 從這里獲取pid（線程id），轉(zhuǎn)換為16進(jìn)制，然后去stack信息中查找對(duì)象的線程信息。 通過(guò)上述方法，查出tomcat進(jìn)程對(duì)應(yīng)的線程cpu占用率累積之和約80%，遠(yuǎn)小于top給出的200%+ 說(shuō)明并不存在長(zhǎng)期占用cpu的線程，應(yīng)該是屬于有許多短暫性的cpu密集計(jì)算。進(jìn)而懷疑是不是jvm內(nèi)存不足，頻繁gc導(dǎo)致。 jstat -gc pid 發(fā)現(xiàn)jvm內(nèi)存使用并未出現(xiàn)異常，gc次數(shù)明顯暴漲 查完內(nèi)存，由于本身是一個(gè)網(wǎng)絡(luò)程序，進(jìn)一步排查網(wǎng)絡(luò)連接。 4、問(wèn)題定位 查詢tomcat對(duì)應(yīng)端口的tcp鏈接，發(fā)現(xiàn)存在大量EASTABLISH的鏈接，還有部分其它狀態(tài)的連接，總計(jì)400+。 netstat -anp | grep port 進(jìn)一步查看這些連接的來(lái)源，發(fā)現(xiàn)是該tomcat服務(wù)的應(yīng)用端，存在大量后臺(tái)線程，在頻繁輪詢?cè)摲⻊?wù)，導(dǎo)致該服務(wù)tomcat 連接數(shù)被打滿，無(wú)法繼續(xù)接收請(qǐng)求。 netstat狀態(tài)說(shuō)明：
5、根源分析 直接觸發(fā)原因是客戶端輪詢，請(qǐng)求異常，繼續(xù)輪序；客戶端不斷有新的后臺(tái)線程加入輪詢隊(duì)伍，最終導(dǎo)致服務(wù)端tomcat連接被打滿。 以上tomcat進(jìn)程cpu占用過(guò)高的問(wèn)題排查記錄就是小編為大家收集整理的全部?jī)?nèi)容了，希望對(duì)大家有所幫助。如果您喜歡這篇文章，可以收藏或分享給您的小伙伴們吧！歡迎持續(xù)關(guān)注我們的后續(xù)更新。 |
免責(zé)聲明：本站部分文章和圖片均來(lái)自用戶投稿和網(wǎng)絡(luò)收集，旨在傳播知識(shí)，文章和圖片版權(quán)歸原作者及原出處所有，僅供學(xué)習(xí)與參考，請(qǐng)勿用于商業(yè)用途，如果損害了您的權(quán)利，請(qǐng)聯(lián)系我們及時(shí)修正或刪除。謝謝！
始終以前瞻性的眼光聚焦站長(zhǎng)、創(chuàng)業(yè)、互聯(lián)網(wǎng)等領(lǐng)域，為您提供最新最全的互聯(lián)網(wǎng)資訊，幫助站長(zhǎng)轉(zhuǎn)型升級(jí)，為互聯(lián)網(wǎng)創(chuàng)業(yè)者提供更加優(yōu)質(zhì)的創(chuàng)業(yè)信息和品牌營(yíng)銷服務(wù)，與站長(zhǎng)一起進(jìn)步！讓互聯(lián)網(wǎng)創(chuàng)業(yè)者不再孤獨(dú)！
掃一掃，關(guān)注站長(zhǎng)網(wǎng)微信
大家都在看當(dāng)我們?cè)诠蚕砭W(wǎng)絡(luò)訪問(wèn)的時(shí)候，可能會(huì)遇到提示指定的網(wǎng)絡(luò)名不再可用的問(wèn)題，這可能是由于我們的共享網(wǎng)絡(luò)出現(xiàn)了錯(cuò)誤，也可能是被共享的對(duì)象所拒絕了。指定的網(wǎng)絡(luò)名 ......
1、首先進(jìn)入到“百度”軟件中， 2、然后在其中輸入“百度識(shí)圖”， 3、之后點(diǎn)擊圖中的“開(kāi)始使用”按鈕， 4、緊接著點(diǎn)擊右下角的“相冊(cè)”功能， 5、在相冊(cè)下 ......
文/曹楊 原標(biāo)題：誰(shuí)還看電視？ 爸爸戴一副老花鏡，媽媽戴一副近視鏡，一人坐在沙發(fā)，一人躺在床上，各自刷著自己關(guān)注的博主更新的短視頻。電視也許開(kāi)著，但只是背景。 這樣的畫(huà)面，幾乎成了洛奇家的常 ...
一、軟件沖突1、首先確認(rèn)是否是應(yīng)用程序沖突導(dǎo)致的。2、查看是否只有特定幾個(gè)游戲或應(yīng)用會(huì)導(dǎo)致該問(wèn)題。3、如果是應(yīng)用沖突，那么只要卸載這些app就可以解決了。二 ......
圖片來(lái)源于簡(jiǎn)書(shū) 文/郭開(kāi)森 楊帆 陸玖財(cái)經(jīng)準(zhǔn)備開(kāi)新欄目了，每周一創(chuàng)始人郭開(kāi)森和楊帆合體郭德帆，對(duì)行業(yè)進(jìn)行一些觀察和評(píng)論，第一篇我們?nèi)允谴蛩銓?xiě)社區(qū)團(tuán)購(gòu)，這是當(dāng)下最火的話題。 來(lái)過(guò)陸玖財(cái)經(jīng)做客的朋友們...
電腦端：1、大家可以點(diǎn)擊右邊鏈接進(jìn)入網(wǎng)頁(yè)版的百度網(wǎng)盤，進(jìn)入之后點(diǎn)擊“去登錄”。https://pan.baidu.com/2、之后正確的輸入賬號(hào)密碼進(jìn)行登錄就好啦。手機(jī)端：1 ......
一、N100對(duì)比intel i3 1、N100的跑分達(dá)到了147210分，這個(gè)數(shù)據(jù)可以達(dá)到i3的七代級(jí)別。 2、在跑分上也是超越了大部分的I3七代CPU，不過(guò)比I3八代要弱勢(shì)一些。 3 ......
8月15日消息 上周，有媒體報(bào)道前身為百度圖片的“榴蓮”APP含有大量不雅視頻內(nèi)容被用戶舉報(bào)。對(duì)此，百度圖片官方進(jìn)行了回應(yīng)，百度圖片表示已經(jīng)對(duì)報(bào)道中所涉及的“生吃旋風(fēng)哥”等爭(zhēng)議內(nèi)容進(jìn)行了下線處理。 此外，百度...
在填寫(xiě)一些項(xiàng)目申請(qǐng)書(shū)中，總是免不了要選擇一些數(shù)字，但是在方框中如何插入數(shù)字，該怎么辦呢?那么下面就由學(xué)習(xí)啦小編給大家分享下word在方框里輸入數(shù)字的技巧， ......
WPS Office手機(jī)版怎么加橫線？很多用戶還不知道WPS Office手機(jī)版怎么加橫線，WPS Office手機(jī)版怎么加橫線，WPS Office手機(jī)版怎么打橫線，WPS Office手機(jī)版怎么弄 ......
迅雷前綴是什么 答：迅雷前綴是（magnet:?xt=urn:btih:）括號(hào)里的就是了。 我們只要在這段文字之后輸入后續(xù)的內(nèi)容，就可以創(chuàng)建下載鏈接了。 1、磁力鏈接不基于文 ......
一、內(nèi)容特權(quán)。 1、半價(jià)點(diǎn)播。 許多站內(nèi)視頻都需要付費(fèi)觀看，而大會(huì)員用戶可以直接半價(jià)享受； 購(gòu)買成功后的48h內(nèi)無(wú)限次觀看。有部分的內(nèi)容是只限在中國(guó)大陸內(nèi)觀 ......
1、首先打開(kāi)小米運(yùn)動(dòng)的“實(shí)驗(yàn)室功能”。 2、接著點(diǎn)擊“門卡模擬”。 3、然后點(diǎn)擊“我知道了”。 4、最后貼近就可以刷卡成功了。...
1、打開(kāi)手機(jī)輕顏相機(jī)app，點(diǎn)擊“我的”，點(diǎn)擊“設(shè)置”，2、點(diǎn)擊“幫助與反饋”，3、點(diǎn)擊右下角“在線咨詢”即可聯(lián)系客服，詢問(wèn)自己的問(wèn)題啦！...
答：華為P系列： 華為p40，華為p40plus，華為p50，華為p50e，華為p60 華為mate系列： 華為mate40，華為mate50，華為mate50e，華為mate60 華為nova系列： 華為n ......
近期有用戶反映，電腦在更新Windows 11 Insider Preview 25252.1000后，出現(xiàn)了應(yīng)用和已壓縮的文件點(diǎn)擊毫無(wú)反應(yīng)，拖拽都不行，只能從開(kāi)始菜單打開(kāi)的情況，這是怎 ......
可見(jiàn)單元格就是不包括隱藏或者篩選篩選后隱藏起來(lái)的單元格區(qū)域。方法：篩選或隱藏?cái)?shù)據(jù)，復(fù)制需要粘貼的值，在目標(biāo)單元格區(qū)域左上角的第一個(gè)單元格處右擊，選擇【 ......
答：驍龍8+更好。 驍龍7+gen2實(shí)際上就是驍龍8+的低配版本。 在一些其他的核心架構(gòu)方面都是保持一致的，比如說(shuō)CPU的架構(gòu)、GPU的架構(gòu)等等。 驍龍7+和驍龍8+具體 ......
文/黎明 一場(chǎng)針對(duì)中國(guó)互聯(lián)網(wǎng)巨頭的反壟斷風(fēng)暴正在醞釀，而且這次動(dòng)真格了。 11月10日，國(guó)家市場(chǎng)監(jiān)管總局發(fā)布《關(guān)于平臺(tái)經(jīng)濟(jì)領(lǐng)域的反壟斷指南（征求意見(jiàn)稿）》，要加大對(duì)互聯(lián)網(wǎng)巨頭涉嫌壟斷的調(diào)查和監(jiān)管。 ...
文件被win10系統(tǒng)誤報(bào)病毒自動(dòng)刪除了如何進(jìn)行恢復(fù)？有用戶下載了某些破解軟件卻被Win10系統(tǒng)誤認(rèn)為是病毒文件而自動(dòng)刪除，當(dāng)然系統(tǒng)自帶殺毒軟件其實(shí)挺不錯(cuò)的，就是有時(shí)候會(huì)誤報(bào)，大家遇到這種情況的時(shí)候就希望把誤刪的...
win11系統(tǒng)如何釋放掉系統(tǒng)默認(rèn)保留的存儲(chǔ)空間？一般情況下，Windows會(huì)保留一些存儲(chǔ)空間，以便設(shè)備獲得良好性能和成功更新。但是當(dāng)出現(xiàn)系統(tǒng)盤儲(chǔ)存空間不足時(shí)，我們會(huì)將幾個(gè)G的保留空間釋放出來(lái)，以解燃眉之急。本期教...
1、先打開(kāi)機(jī)頂盒進(jìn)入主界面，并且使用遙控器打開(kāi)設(shè)置。 2、然后選擇“賬號(hào)與安全”，并且進(jìn)入。 3、最后往下面翻就可以看到“ADB調(diào)試”的選項(xiàng)，直接開(kāi)啟就行了 ......
答：在3DMark壓力測(cè)試當(dāng)中，顯卡需要超高97%才能夠算合格，證明顯卡的穩(wěn)定性是過(guò)關(guān)的。 1、一般的默認(rèn)情況下在2500~3000分就算很正常的了。 2、分?jǐn)?shù)越高說(shuō)明顯卡 ......
羅技g304dpi燈顏色代表什么：1、藍(lán)色：這種情況是正常工作的顯示，如果說(shuō)是常亮或者閃爍，那都沒(méi)有問(wèn)題這是在正常工作呢。2、紅色：如果說(shuō)是紅燈閃爍的話那就是 ......
我們經(jīng)常用WPS的時(shí)候，如果需要輸入波浪號(hào)～，會(huì)發(fā)現(xiàn)鍵盤上的波浪號(hào)輸入之后在最上面，但是為了美觀，我們希望波浪號(hào)顯示在中間。這里總結(jié)了三個(gè)方法分享給大家 ......
win11系統(tǒng)快速跳過(guò)聯(lián)網(wǎng)創(chuàng)建本地管理賬戶3種方法？現(xiàn)在市面上銷售的品牌筆記本和臺(tái)式機(jī)基本上都預(yù)裝Windows11家庭中文版正版操作系統(tǒng)，聯(lián)網(wǎng)后系統(tǒng)會(huì)自動(dòng)激活。當(dāng)用戶拿到新機(jī)器后還需要按照cortana（小娜）的提示一步...
答：中高端水平 i513500hx在處理器當(dāng)中是處于一個(gè)中高端的水平。 i513500hx是第十一代酷睿處理器系列的一員，基礎(chǔ)頻率為2.4GHz，表現(xiàn)十分的不錯(cuò)。 i513500hx介 ......
打開(kāi)軟件，直接填寫(xiě)就可以。 1、下載安裝easyconnect軟件， 2、打開(kāi)easyconnect應(yīng)用，在如圖所示的“服務(wù)器地址”一欄輸入如圖所示網(wǎng)址，點(diǎn)擊“連接”， 3、等 ......
相信有非常多使用過(guò)筆記本的用戶都聽(tīng)說(shuō)過(guò)獨(dú)顯直連這個(gè)詞，但很多用戶并不了解獨(dú)顯直連是什么，又有什么用處，那么下面就和小編一起來(lái)看看什么是獨(dú)顯直連和開(kāi)啟這 ......
win11系統(tǒng)開(kāi)機(jī)總是自動(dòng)登錄OneDrive如何關(guān)閉？win11系統(tǒng)開(kāi)機(jī)的時(shí)候，會(huì)自動(dòng)啟動(dòng)OneDrive，不想要啟動(dòng)，該怎么操作呢？下面我們就來(lái)看看詳細(xì)的教程。 在OneDrive界面點(diǎn)小齒輪按鈕，下拉菜單中點(diǎn)【設(shè)置】。 單擊【...
