多进程操作如何正确使用 Python logging TimedRotatingFileHandler

2015-12-23 21:50:01 +08:00
 billion
楼主有 24 台服务器,上面的某个程序会使用 Python logging 来写 Log ,使用 TimedRotatingFileHandler 来让 Log 在每天午夜自动添加时间后缀。 Log 存放在一台服务器上,所有的其他服务器都来写这一个 Log 文件。

这样就会导致在午夜更新文件名的时候,出现 Windows Error 32 , 因为这个文件还在被其他 logging 占用,所以无法正常修改文件名。

请教各位,如何才能解决这个问题。
5662 次点击
所在节点    Python
8 条回复
tolbkni
2015-12-23 22:02:26 +08:00
可以用 RemoteSyslogHandler 发送到 syslog 后端,用 logrotate 来切分日志
knightdf
2015-12-23 22:14:20 +08:00
多进程下 python 的 RotatingFileHandler 有 BUG 的,自己重写下 doRollover 函数就好了,我都是自己改写的。
class MultiProcessTimedRotatingFileHandler(TimedRotatingFileHandler)
mouer
2015-12-24 10:02:31 +08:00
启动一个记录 log 的 python 程序,然后用 sockerHandler 写到这个程序上,这个程序再用 TimedRotatingFileHandler
mulog
2015-12-24 11:32:10 +08:00
我是另起了一个进程 如 @mouer 所说用 SocketHandler
billion
2015-12-24 12:00:31 +08:00
@mouer 这确实是一个好的办法。但是由于网络存在不可信的因素,所以这样做的话,可能会漏掉 log.
Jordan
2015-12-24 13:02:39 +08:00
@tolbkni 正解
billion
2015-12-24 13:11:26 +08:00
@tolbkni 似乎只种方式只能在 Unix 下面使用, Windows 下面就不行了。
sujin190
2015-12-25 21:27:22 +08:00

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/245711

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX