Nginx狀態監控以及日志分析詳解_nginx

來源:腳本之家  責任編輯:小易  

愛站SEO工具包之網站日志分析工具的使用方法。1、此工具可以自動識別IIS、Apache、Nginx日志格式,支持直接拖拽日志一個或多個文件(夾)至窗口進行分析,每一項數據都分別以“數據顯示”和“圖形顯示”兩種不同方式向用戶展示數據結果。2、蜘蛛分析之(概要分析)即所有不同的蜘蛛的訪問次數、停留時間、總抓取量的數據分析,(還可以單選不同蜘蛛)進行查詢。蜘蛛分析之(概要分析)圖表顯示,(還可以單選不同蜘蛛)進行查詢顯示。3、蜘蛛分析之(目錄抓。┘凑军c目錄被抓取的數據量分析?梢葬槍δ硞目錄或蜘蛛進行單獨查詢分析,且可切換至圖表顯示,顯示抓取量餅圖,輕松了解蜘蛛抓取目錄概況。4、蜘蛛分析之(頁面抓。┧许撁嬷┲胱ト×糠治,還可以針對某個頁面或某個蜘蛛進行單獨查詢分析。切換至圖標顯示,可以顯示頁面抓取量餅圖,快速了解抓取量最多的頁面,輕松分析頁面抓取情況。5、蜘蛛分析之(IP排行)分析所有蜘蛛IP地址的訪問次數、抓取量和停留時長,并可以針對某個ip或蜘蛛進行單獨查詢分析。6、搜索引擎分析之(關鍵詞分析)可分析出各搜索引擎來路的關鍵詞。7、狀態碼分析分為用戶狀態碼和蜘蛛狀態碼。通過查看網站正常狀態碼和問題狀態碼,第一時間發現網站的問題頁面,及時修改,改善用戶體驗和蜘蛛體驗。8、按時間統計,工具自動保存不同日期的日志文件數據,每一項統計功能都可以按照時間來分析,可有效查看時間段內的數據變化趨勢。(還可以單選不同蜘蛛)進行查詢顯示。以上就是愛站SEO工具包之網站日志分析工具的詳細介紹www.anxorj.tw防采集請勿采集本網。

1、Nginx狀態監控

由日本Murakami Giken公司研制的chip-55A型刀具破損監控儀采用聲發射監控技術,實施對加工過程中刀具狀態的監控,該產品與其公司生產的數控銑床配套使用,效果良好。(2)切削力信號測量法 切削力變化是切

Nginx提供了一個內置的狀態信息監控頁面可用于監控Nginx的整體訪問情況,這個功能由ngx_http_stub_status_module模塊進行實現。

二、僅這一種情況還不能斷定全部結果,為此,筆者由抽樣了部分日志文件,經分析百度蜘蛛電信ip段以及電信ip訪客在訪問網站時也會出現200 0 64這個狀態碼。再一個,考慮到必應的蜘蛛ip都是美國的,若網站

使用nginx -V 2>&1 | grep -o with-http_stub_status_module命令檢測當前Nginx是否有status功能,如果輸出ngx_http_stub_status_module則說明是有的,如果沒有可以在編譯時加上此模塊。

(2)采集服務器的相關信息,并保存在服務器的日志文件中,供網絡管理員進行定期的數據分析。主要包括:重點分區文件的變動信息、容量大小信息、服務器重新啟動信息等。(3)服務器進程信息的監測。主要包括

默認情況下,status是關閉的,我們需要開啟,并指定uri來訪問數據。

server { listen 80; server_name default_server; location /status { stub_status on; allow 114.247.125.227; }}

allow配置只允許指定的Ip才能訪問nginx status功能,去掉就是不限制。

重啟Nginx之后,瀏覽器訪問http://{IP}/status查看狀態監控信息

Active connections:當前的客戶端活動連接數(包含正在等待的客戶端連接),相當于TCP連接狀態處于Established和SYN_ACK accepts: 已接受的客戶端連接總數,即已被worker進程接收的連接 handled: 已被處理的連接總數 requests: 客戶端的http請求總數 Reading: 當前正在讀取的http請求數(讀取到http請求首部) Writing: 當前準備響應的連接數(寫入到http響應首部) Waiting: 當前處于等待的空閑客戶端請求數, 等待的時間為Reading和Writing之間的間隔

采集到Nginx數據之后就可以用監控工具給監控起來了。

2、日志分析

Nginx默認的日志格式配置可以在/etc/nginx/nginx.conf中找到

log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_forwarded_for" $request_time $upstream_response_time';

打印的日志實例

39.105.66.117 - mp [11/Sep/2019:19:03:01 +0800] "POST /salesplatform-gateway/users HTTP/1.1" 200 575 "-" "Apache-HttpClient/4.5.5 (Java/1.8.0_161)" "-" 0.040 0.040

39.105.66.117 - mp [11/Sep/2019:19:03:08 +0800] "POST /salesplatform-gateway/users HTTP/1.1" 200 575 "-" "Apache-HttpClient/4.5.5 (Java/1.8.0_161)" "-" 0.008 0.008

$remote_addr: 客戶端的ip地址 $remote_user: 用于記錄遠程客戶端的用戶名稱 $time_local: 用于記錄訪問時間和時區 $request: 用于記錄請求的url以及請求方法 $status: 響應狀態碼 $body_bytes_sent: 給客戶端發送的文件主體內容字節數 $http_referer: 可以記錄用戶是從哪個鏈接訪問過來的 $http_user_agent: 用戶所使用的瀏覽器信息 $http_x_forwarded_for: 可以記錄客戶端IP,通過代理服務器來記錄客戶端的ip地址 $request_time: 指的是從接受用戶請求的第一個字節到發送完響應數據的時間,即$request_time包括接收客戶端請求數據的時間、后端程序響應的時間、發送響應數據給客戶端的時間 $upstream_response_time: 用于接收來自上游服務器的響應的時間

常用分析命令

1、根據訪問IP統計UV

awk '{print $1}' paycenteraccess.log | sort -n | uniq | wc -l

2、查詢訪問最頻繁的IP(前10)

awk '{print $1}' /var/log/nginx/access.log | sort -n |uniq -c | sort -rn | head -n 10

3、查看某一時間段的IP訪問量(1-8點)

awk '$4 >="[25/Mar/2020:01:00:00" && $4 <="[25/Mar/2020:08:00:00"' /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c| sort -nr |wc -l

4、查看訪問100次以上的IP

awk '{print $1}' /var/log/nginx/access.log | sort -n |uniq -c |awk '{if($1 >100) print $0}'|sort -rn

5、查看指定ip訪問過的url和訪問次數

grep "39.105.67.140" /var/log/nginx/access.log|awk '{print $7}' |sort |uniq -c |sort -n -k 1 -r

6、根據訪問URL統計PV

cat /var/log/nginx/access.log |awk '{print $7}' |wc -l

7、查詢訪問最頻繁的URL(前10)

awk '{print $7}' /var/log/nginx/access.log | sort |uniq -c | sort -rn | head -n 10

8、查看訪問最頻的URL([排除/api/appid])(前10)

grep -v '/api/appid' /var/log/nginx/access.log|awk '{print $7}' | sort |uniq -c | sort -rn | head -n 10

9、查看頁面訪問次數超過100次的頁面

cat /var/log/nginx/access.log | cut -d ' ' -f 7 | sort |uniq -c | awk '{if ($1 > 100) print $0}' | less

10、查看最近1000條記錄,訪問量最高的頁面

tail -1000 /var/log/nginx/access.log |awk '{print $7}'|sort|uniq -c|sort -nr|less

11、統計每小時的請求數,top10的時間點(精確到小時)

awk '{print $4}' /var/log/nginx/access.log |cut -c 14-15|sort|uniq -c|sort -nr|head -n 10

12、統計每分鐘的請求數,top10的時間點(精確到分鐘)

awk '{print $4}' /var/log/nginx/access.log |cut -c 14-18|sort|uniq -c|sort -nr|head -n 10

13、統計每秒的請求數,top10的時間點(精確到秒)

awk '{print $4}' /var/log/nginx/access.log |cut -c 14-21|sort|uniq -c|sort -nr|head -n 10

14、查找指定時間段的日志

awk '$4 >="[25/Mar/2020:01:00:00" && $4 <="[25/Mar/2020:08:00:00"' /var/log/nginx/access.log

15、列出傳輸時間超過 0.6 秒的url,顯示前10條

cat /var/log/nginx/access.log |awk '(substr($NF,2,5) > 0.6){print $4,$7,substr($NF,2,5)}' | awk -F '"' '{print $1,$2,$3}' |sort -k3 -rn | head -10

16、列出/api/appid請求時間超過0.6秒的時間點

cat /var/log/nginx/access.log |awk '(substr($NF,2,5) > 0.6 && $7~/\/api\/appid/){print $4,$7,substr($NF,2,5)}' | awk -F '"' '{print $1,$2,$3}' |sort -k3 -rn | head -10

17、獲取前10條最耗時的請求時間、url、耗時

cat /var/log/nginx/access.log |awk '{print $4,$7,substr($NF,2,5)}' | awk -F '"' '{print $1,$2,$3}' | sort -k3 -rn | head -10

總結

到此這篇關于Nginx狀態監控以及日志分析的文章就介紹到這了,更多相關Nginx狀態監控及日志分析內容請搜索真格學網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持真格學網!

通過查看Nginx的并發連接,我們可以更清除的知道網站的負載情況。Nginx并發查看有兩種方法(之所以這么說,是因為筆者只知道兩種),一種是通過web界面,一種是通過命令,web查看要比命令查看顯示的結果精確一些。下面介紹這兩種查看方法No1、通過瀏覽器查看通過web界面查看時Nginx需要開啟status模塊,也就是安裝Nginx時加上 –with-http_stub_status_module 然后配置Nginx.conf,在server點里面加入如下內容location/nginx_status {stub_status on;access_log off;allow 192.168.1.100;訪問IPdeny all;}配置完后重新啟動Nginx后我們可以通過瀏覽器訪問http://localhost/status 查看,如下圖解析:Active connections/當前 Nginx 正處理的活動連接數。server accepts handledrequests/總共處理了8 個連接,成功創建 8 次握手,總共處理了500個請求。Reading/nginx 讀取到客戶端的 Header 信息數。Writing/nginx 返回給客戶端的 Header 信息數。Waiting/開啟 keep-alive 的情況下,這個值等于 active –(reading+writing),意思就是 Nginx 已經處理完正在等候下一次請求指令的駐留連接No2、通過命令查看netstat-n|awk‘/^tcp/{+S[$NF]} END {for(a in S)print a,S[a]}’TIME_WAIT 17ESTABLISHED 3254LAST_ACK 236FIN_WAIT_1 648FIN_WAIT_2 581CLOSING 7CLOSE_WAIT 4916解析:CLOSED/無連接是活動的或正在進行LISTEN/服務器在等待進入呼叫SYN_RECV/一個連接請求已經到達,等待確認SYN_SENT/應用已經開始,打開一個連接ESTABLISHED/正常數據傳輸狀態/當前并發連接數FIN_WAIT1/應用說它已經完成FIN_WAIT2/另一邊已同意釋放ITMED_WAIT/等待所有分組死掉CLOSING/兩邊同時嘗試關閉TIME_WAIT/另一邊已初始化一個釋放LAST_ACK/等待所有分組死掉內容來自www.anxorj.tw請勿采集。


  • 本文相關:
  • nginx日志配置指令詳解
  • 詳解用elk來分析nginx服務器日志的方法
  • nginx服務器中access_log日志分析與配置詳解
  • shell腳本分析 nginx日志訪問次數最多及最耗時的頁面(慢查詢)
  • php連接nginx服務器并解析nginx日志的方法
  • nginx日志統計分析的常用命令總結
  • nginx服務狀態監控的方法
  • nginx配置檢測服務狀態的實現方法
  • python監控nginx端口和進程狀態
  • nginx日志按天生成和定期刪除日志的方法
  • nginx服務器中使用gzip壓縮的相關配置解析
  • nginx服務器中限制連接數與限制請求的模塊配置教程
  • nginx配置訪問圖片路徑以及html靜態頁面的調取方法
  • nginx日志中添加請求的response日志(推薦)
  • nginx設置目錄白名單、ip白名單的實現方法
  • 在nginx服務器中啟用ssl的配置方法
  • debian系統下為php程序配置nginx服務器的基本教程
  • nginx使用replace-filter-nginx-module實現內容替換的示例
  • 利用nginx反向代理解決跨域問題詳解
  • 如何監控 NGINX
  • 愛站SEO工具包之日志分析工具
  • 網站日志分析里面的用戶狀態碼出現了500我該怎么解決
  • 如何做日志分析
  • 刀具磨損的檢測與監控方法
  • 網站日志分析問題
  • 如何監控服務器運行狀態
  • 如何收集 NGINX 指標
  • 網站首頁網頁制作腳本下載服務器操作系統網站運營平面設計媒體動畫電腦基礎硬件教程網絡安全星外虛擬主機華眾虛擬主機linuxwin服務器ftp服務器dns服務器tomcat nginxzabbix云和虛擬化服務器其它首頁服務器nginx日志配置指令詳解詳解用elk來分析nginx服務器日志的方法nginx服務器中access_log日志分析與配置詳解shell腳本分析 nginx日志訪問次數最多及最耗時的頁面(慢查詢)php連接nginx服務器并解析nginx日志的方法nginx日志統計分析的常用命令總結nginx服務狀態監控的方法nginx配置檢測服務狀態的實現方法python監控nginx端口和進程狀態nginx日志按天生成和定期刪除日志的方法nginx服務器中使用gzip壓縮的相關配置解析nginx服務器中限制連接數與限制請求的模塊配置教程nginx配置訪問圖片路徑以及html靜態頁面的調取方法nginx日志中添加請求的response日志(推薦)nginx設置目錄白名單、ip白名單的實現方法在nginx服務器中啟用ssl的配置方法debian系統下為php程序配置nginx服務器的基本教程nginx使用replace-filter-nginx-module實現內容替換的示例利用nginx反向代理解決跨域問題詳解nginx提示:500 internal servernginx 多站點配置方法集合權限問題導致nginx 403 forbiddenginx fastcgi錯誤primary scripnginx服務器的反向代理proxy_pasnginx 403 forbidden的解決辦法nginx偽靜態配置和常用rewrite偽nginx下301重定向域名的方法小結詳解nginx服務器中配置超時時間的windows下nginx+php5的安裝與配置nginx根據不同瀏覽器語言配置頁面跳轉的方使nginx服務器支持.htaccess的方法解讀nginx中limit配置參數nginx源碼分析線程池詳解如何讓nginx快速支持tls1.3協議詳解nginx worker_connections配置太低導致50詳解linux環境下使nginx服務器支持中文urnginx的try_files指令使用實例nginx服務器下防盜鏈的方法介紹常見的nginx配置誤區
    免責聲明 - 關于我們 - 聯系我們 - 廣告聯系 - 友情鏈接 - 幫助中心 - 頻道導航
    Copyright © 2017 www.anxorj.tw All Rights Reserved
    陕西快乐10分下载