本篇內(nèi)容介紹了“Nginx日志分析及性能排查的方法是什么”的有關(guān)知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細閱讀,能夠?qū)W有所成!
創(chuàng)新互聯(lián)公司是一家專業(yè)的成都網(wǎng)站建設(shè)公司,我們專注成都網(wǎng)站制作、做網(wǎng)站、外貿(mào)營銷網(wǎng)站建設(shè)、網(wǎng)絡(luò)營銷、企業(yè)網(wǎng)站建設(shè),賣友情鏈接,1元廣告為企業(yè)客戶提供一站式建站解決方案,能帶給客戶新的互聯(lián)網(wǎng)理念。從網(wǎng)站結(jié)構(gòu)的規(guī)劃UI設(shè)計到用戶體驗提高,創(chuàng)新互聯(lián)力求做到盡善盡美。
如果需要得到請求處理的時間,需要在nginx log 里面加上$request_time,下面是我的log_format
nginx.conf
log_format main '$remote_addr - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent $request_body "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for" "$request_time"';
修改之后重啟nginx,查看nginx log的時候,就能看到nginx處理請求所花的時間了,這個時間基本就是后端所花的時間,所以可以根據(jù)這個字段來得到響應(yīng)慢的請求
以下是就是我用到的一些命令了
獲取pv數(shù)
$ cat /usr/local/nginx/logs/access.log | wc -l
獲取ip數(shù)
$ cat /usr/local/nginx/logs/access.log | awk '{print $1}' | sort -k1 -r | uniq | wc -l
獲取最耗時的請求時間、url、耗時,前10名, 可以修改后面的數(shù)字獲取更多,不加則獲取全部
$ cat /usr/local/class/logs/access.log | awk '{print $4,$7,$NF}' | awk -F '"' '{print $1,$2,$3}' | sort -k3 -rn | head -10
獲取某一時刻的請求數(shù)量,可以把秒去掉得到分鐘的數(shù)據(jù),把分鐘去掉得到小時的數(shù)據(jù),以此類推
$ cat /usr/local/class/logs/access.log | grep 2017:13:28:55 | wc -l
獲取每分鐘的請求數(shù)量,輸出成csv文件,然后用excel打開,可以生成柱狀圖
$ cat /usr/local/class/logs/access.log | awk '{print substr($4,14,5)}' | uniq -c | awk '{print $2","$1}' > access.csv
上面的圖是用excel生成的,也可以用命令行工具gnuplot生成png,我也試了一下,沒什么問題,直接以編程的形式得到報表,去掉人工操作部分,很方便,但是有一點就是x軸數(shù)據(jù)比較多的時候,不能像excel一樣自動稀釋數(shù)據(jù),所以我還是喜歡用excel來生成
其實用來用去也就是那么幾個命令:
cat:輸入文件內(nèi)容
grep:過濾文本
'sort':排序
'uniq':去重
'awk':文本處理
命令組合使用,單個命令可以使用多次,來達到多重過濾的效果,前面一個命令的輸出就是后一個命令的輸入,流式處理,只要學(xué)會這個命令,有多看似復(fù)雜的東西,都變得異常簡單。
上面介紹的都是命令,下面再介紹一個直接輸出html的,其實就是利用go-access來分析nginx日志
cat /usr/local/nginx/logs/access.log | docker run --rm -i diyan/goaccess --time-format='%H:%M:%S' --date-format='%d/%b/%Y' --log-format='%h %^[%d:%t %^] "%r" %s %b "%R" "%u"' > index.html
go-access是以docker容器的形式運行的,只要你安裝了docker,就能直接運行,免安裝很方便
以上腳本,配合日志每天的日志分割,然后在crontab里面配置一下自動運行腳本,可生成每一天的nginx報表,網(wǎng)站情況一幕了然,當(dāng)然這里也有缺點,因為不實時
想要統(tǒng)計實時數(shù)據(jù),可以使用ngxtop 來查看,安裝起來也很簡單
$ pip install ngxtop
運行的話,先進到nginx目錄,然后再運行,-c 指定配置文件,-t 刷新頻率,單位為秒
$ cd /usr/local/nginx
$ ngxtop -c conf/nginx.conf -t 1
但是這種實時的方式,還需要ssh遠程登錄,不太方便,還可以使用lua來進行實時統(tǒng)計,然后寫一個界面把數(shù)據(jù)展示出來,通過lua-nginx-module,nginx/tengine 都可以用,如果直接安裝openresty的話,就方便了,內(nèi)嵌了lua,不需要重新編譯nginx了
“Nginx日志分析及性能排查的方法是什么”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實用文章!
分享題目:Nginx日志分析及性能排查的方法是什么
文章地址:http://aaarwkj.com/article14/iiphde.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供商城網(wǎng)站、電子商務(wù)、定制開發(fā)、做網(wǎng)站、軟件開發(fā)、自適應(yīng)網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)