python實現即時監控文件

高洛峰
發布: 2017-02-25 09:59:28
原創
1899 人瀏覽過

在業務穩定性要求比較高的情況下,維運為能及時發現問題,有時需要對應用程式的日誌進行即時分析,當符合某個條件時就立刻報警,而不是被動等待出問題後去解決,例如要監控nginx的$request_time和$upstream_response_time時間,分析出最耗時的請求,然後去改進程式碼,這時就要對日誌進行即時分析了,發現時間長的語句就要報警出來,提醒開發人員要關注,當然這是其中一個應用場景,透過這種監控方式還可以應用到任何需要判斷或分析文件的地方,所以今天我們就來看看如何用python實現實時監控文件,我給三個方法實例::

第一種:

這個是最簡單的又容易理解的,因為大家都知道linux下有tail指令,所以你可以直接用Popen()函數去呼叫這個指令來執行取得輸出,程式碼如下:

logfile='access.log'
command='tail -f ‘+logfile+'|grep “timeout”‘
popen=subprocess.Popen(command,stdout=subprocess.PIPE,stderr=subprocess.PIPE,shell=True)
while True:
line=popen.stdout.readline().strip()
print line
登入後複製

第二種:

採用python對檔案的操作來實現,用檔案物件的tell(), seek()方法分別得到目前檔案位置和要移動到的位置,程式碼如下:

import time
file = open(‘access.log')
while 1:
where = file.tell()
line = file.readline()
if not line:
time.sleep(1)
file.seek(where)
else:
print line,
登入後複製

第三種:

利用python的yield來實作一個生成器函數,然後呼叫這個生成器函數,這樣當日誌檔案有變化時就列印新的行,程式碼如下:

import time
def follow(thefile):
thefile.seek(0,2)
while True:
line = thefile.readline()
if not line:
time.sleep(0.1)
continue
yield line
if __name__ == ‘__main__':
logfile = open(“access-log”,”r”)
loglines = follow(logfile)
for line in loglines:
print line,
登入後複製

#最後解釋下seek()函數的用法,這個函數接收2個參數:file.seek( off, whence=0),從文件中移動off個操作標記(文件指標),正數往結束方向移動,負數往開始方向移動。如果設定了whence參數,就以whence設定的起始位元為準,0代表從頭開始,1代表目前位置,2代表檔案最末端位置。

以上就是三個常用方法,具體日誌分析的程式碼大家可以依照自己的業務邏輯去實現,完畢。

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支PHP中文網。

更多python實現即時監控檔案相關文章請關注PHP中文網!

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!