Python解析日志文件以实时提取事件

发布时间：2020-12-13 19:27:45 所属栏目：Linux 来源：网络整理

导读：我有一个将消息记录到文件的进程. 我想实现另一个解析这些日志的进程(在Python中)(当它们写入文件时),过滤我感兴趣的行,然后根据第一个进程的状态执行某些操作. 我想知道如果在Python中有一个类似这样的库,我会继续自己写一些东西. 此外,有关如何实现类似Pyt

我有一个将消息记录到文件的进程.

我想实现另一个解析这些日志的进程(在Python中)(当它们写入文件时),过滤我感兴趣的行,然后根据第一个进程的状态执行某些操作.

我想知道如果在Python中有一个类似这样的库,我会继续自己写一些东西.

此外,有关如何实现类似Python的实现的想法将不胜感激.

谢谢.

最佳答案

C程序通常会寻求当前位置来清除任何“文件结束”标志.但是作为@9000 correctly pointed out,python显然会处理这个,所以你可以重复读取同一个文件,即使它已经到达文件末尾.

但是,您可能需要处理不完整的行.如果您的应用程序将其日志写入碎片,那么您需要确保处理整行,而不是那些碎片.以下代码将实现：

f = open('some.log','r')
while True:
    line = ''
    while len(line) == 0 or line[-1] != 'n':
        tail = f.readline()
        if tail == '':
            time.sleep(0.1)          # avoid busy waiting
            # f.seek(0,io.SEEK_CUR) # appears to be unneccessary
            continue
        line += tail
    process(line)

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!