python 实时遍历日志文件

open 遍历一个大日志文件

使用 readlines() 还是 readline() ?

总体上 readlines() 不慢于python 一次次调用 readline()，因为前者的循环在C语言层面，而使用readline() 的循环是在Python语言层面。

但是 readlines() 会一次性把全部数据读到内存中，内存占用率会过高，readline() 每次只读一行，对于读取 大文件， 需要做出取舍。

如果不需要使用 seek() 定位偏移， for line in open('file') 速度更佳。

使用 readlines()，适合量级较小的日志文件

import os
import time
def check():
p = 
while True:
f = open("log.txt", "r+")
f = open("result.txt", "a+")
f.seek(p, )
#readlines()方法
filelist = f.readlines()
if filelist:
for line in filelist:
#对行内容进行操作
f.write(line)
#获取当前位置，为下次while循环做偏移
p = f.tell()
print 'now p ', p
f.close()
f.close()
time.sleep()
if __name__ == '__main__':
check() 

使用 readline()，避免内存占用率过大

import os
import time
def check():
p = 
while True:
f = open("log.txt", "r+")
f = open("result.txt", "a+")
f.seek(p, )
#while readline()方法
while True:
l = f.readline()
#空行同样为真
if l:
#对行内容操作
f.write(l)
else:
#获取当前位置，作为偏移值
p = f.tell()
f.close()
f.close()
break
print 'now p', p
time.sleep()
if __name__ == '__main__':
check()

相關標籤：

python遍历日志文件 python日志文件

來源：php.cn

上一篇：Python Web框架Tornado运行和部署 下一篇：Python爬虫爬验证码实现功能详解

本網站聲明

本文內容由網友自願投稿，版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容，請聯絡admin@php.cn

作者最新文章

• 貝萊德將比特幣標記為獨特的多元化工具
  2024-09-20 15:51:33
• Internet Computer (ICP) Price Prediction: Will ICP Price Hit $24?
  2024-09-20 15:47:32
• 世界幣 (WLD) 價格預測 2022-23
  2024-09-20 15:45:32
• Top Meme Coins to Invest In Today
  2024-09-20 15:39:32
• Floki (FLOKI) Price Prediction: Will the Revamped Marketing Help Floki Catch Up on October Gains?
  2024-09-20 15:38:32
• Next Cryptocurrency to Explode: 5 Coins to Add to Your Watchlist
  2024-09-20 15:27:32
• Dogecoin: From an Internet Meme to a Digital Currency with a Billion-Dollar Market Capitalization
  2024-09-20 15:26:32
• ZChains 推出一系列令人興奮的更新和發布，以增強其生態系統
  2024-09-20 15:12:32
• 如何下载小狐狸支付平台的Apple版本
  2024-09-20 14:53:01
• 新手如何在MetaMask进行交易及优缺点
  2024-09-20 14:51:01

最新問題

我應該在 apache 中哪裡放置 CustomLog 指令 我正在使用php:7.2-apachedocker。我需要禁用運行狀況檢查url登入訪問日誌。基於此鏈接，他們提到了有關修改Customlog指令的資訊。我不是關於需要更改Cust...

來自於 2024-04-06 22:03:59

0

1

990

探討 Node.js 中事件處理迴圈背後的理論 我正在查看這個描述JavaScript中的檔案遍歷演算法的要點//ES6versionusingasynchronousiterators,compatiblewithnodev1...

來自於 2024-04-01 19:35:24

0

1

273

我可以從 Docker 容器內部存取 AWS Fargate 任務 ID 嗎？ 我正在Docker容器中運行PHP應用程序，我希望將任務ID包含在發送到AWSCloudwatch的日誌中使用的串流ID中。我怎樣才能訪問它？從我的日誌中我可以看到一些錯誤包括系統...

來自於 2024-03-30 15:48:15

0

1

297

相關專題

更多>

• json資料格式
• 常用vbs腳本
• .exe是什麼文件
• li是什麼元素
• case when用法sql
• viewer呼叫的方法
• docker容器無法存取外部網路怎麼辦
• java實作docker容器技術的方法