在業(yè)務(wù)穩(wěn)定性要求比較高的情況下,運(yùn)維為能及時(shí)發(fā)現(xiàn)問題,有時(shí)需要對(duì)應(yīng)用程序的日志進(jìn)行實(shí)時(shí)分析,當(dāng)符合某個(gè)條件時(shí)就立刻報(bào)警,而不是被動(dòng)等待出問題后去解決,比如要監(jiān)控nginx的$request_time和$upstream_response_time時(shí)間,分析出最耗時(shí)的請(qǐng)求,然后去改進(jìn)代碼,這時(shí)就要對(duì)日志進(jìn)行實(shí)時(shí)分析了,發(fā)現(xiàn)時(shí)間長的語句就要報(bào)警出來,提醒開發(fā)人員要關(guān)注,當(dāng)然這是其中一個(gè)應(yīng)用場景,通過這種監(jiān)控方式還可以應(yīng)用到任何需要判斷或分析文件的地方,所以今天我們就來看看如何用python實(shí)現(xiàn)實(shí)時(shí)監(jiān)控文件,我給三個(gè)方法實(shí)例::
第一種:
這個(gè)是最簡單的和容易理解的,因?yàn)榇蠹叶贾纋inux下有tail命令,所以你可以直接用Popen()函數(shù)去調(diào)用這個(gè)命令來執(zhí)行獲取輸出,代碼如下:
logfile='access.log' command='tail -f ‘+logfile+'|grep “timeout”‘ popen=subprocess.Popen(command,stdout=subprocess.PIPE,stderr=subprocess.PIPE,shell=True) while True: line=popen.stdout.readline().strip() print line
第二種:
采用python對(duì)文件的操作來實(shí)現(xiàn),用文件對(duì)象的tell(), seek()方法分別得到當(dāng)前文件位置和要移動(dòng)到的位置,代碼如下:
import time file = open(‘a(chǎn)ccess.log') while 1: where = file.tell() line = file.readline() if not line: time.sleep(1) file.seek(where) else: print line,
第三種:
利用python的 yield來實(shí)現(xiàn)一個(gè)生成器函數(shù),然后調(diào)用這個(gè)生成器函數(shù),這樣當(dāng)日志文件有變化時(shí)就打印新的行,代碼如下:
import time def follow(thefile): thefile.seek(0,2) while True: line = thefile.readline() if not line: time.sleep(0.1) continue yield line if __name__ == ‘__main__': logfile = open(“access-log”,”r”) loglines = follow(logfile) for line in loglines: print line,
最后解釋下seek()函數(shù)的用法,這個(gè)函數(shù)接收2個(gè)參數(shù):file.seek(off, whence=0),從文件中移動(dòng)off個(gè)操作標(biāo)記(文件指針),正數(shù)往結(jié)束方向移動(dòng),負(fù)數(shù)往開始方向移動(dòng)。如果設(shè)定了whence參數(shù),就以whence設(shè)定的起始位為準(zhǔn),0代表從頭開始,1代表當(dāng)前位置,2代表文件最末尾位置。
以上就是三個(gè)常用方法,具體日志分析的代碼大家可以根據(jù)自己的業(yè)務(wù)邏輯去實(shí)現(xiàn),完畢。
以上就是本文的全部內(nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號(hào)聯(lián)系: 360901061
您的支持是博主寫作最大的動(dòng)力,如果您喜歡我的文章,感覺我的文章對(duì)您有幫助,請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長非常感激您!手機(jī)微信長按不能支付解決辦法:請(qǐng)將微信支付二維碼保存到相冊,切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對(duì)您有幫助就好】元
