python - 使用 Pyramid 和 rq 写入同一个日志文件

Question

我正在使用 Pyramid 和 rq我想将 rq worker 作业记录在与我的 Pyramid 应用程序相同的文件中。

我的设置是这样的:

开发.ini

# regular pyramid setup here...

[loggers]
keys = root, main

[handlers]
keys = console, debuglog

[formatters]
keys = generic

[logger_root]
level = DEBUG
handlers = console, debuglog

[logger_main]
level = DEBUG
handlers =
qualname = main

[handler_debuglog]
class = handlers.RotatingFileHandler
args = ('%(here)s/__logs/pyramid_debug.log','a')
level = DEBUG
formatter = generic

[formatter_generic]
format = %(asctime)s %(levelname)-8s [%(name)s][%(threadName)s] %(message)s

主.py

from bunch import Bunch
from redis import Redis
from rq import Queue, Worker
from helpers.rqworker import run_worker
from helpers.log import write_log

write_log('info', 'APP STARTED.')
q = Queue(connection=Redis())
req_obj = Bunch()
req_obj.remote_addr = self.request.remote_addr
job = q.enqueue(run_worker, req_obj, {'some_other': 'data'})
write_log('info', 'APP ENDED.')

helpers/rqworker.py

from helpers.log import write_log

def run_worker(req, data):
    write_log(req, 'debug', 'WORKER STARTED', separator=True)

helpers/log.py

import logging
log = logging.getLogger(__name__)


def write_log(request, loglevel, message=None, **kwargs):
    msg = '[{0}] {1}'.format(request.remote_addr, message)
    level = logging.getLevelName(loglevel.upper())

    if 'separator' in kwargs:
        log.log(level, '='*40)

    if message:
        log.log(level, msg)

    if 'stack' in kwargs:
        log.log(level, '{0} EXCEPTION {0}'.format('*'*15))
        log.log(level, kwargs['stack'])
        log.log(level, '{0} EXCEPTION END {0}'.format('*'*13))

当我运行我的应用程序时，我看不到来自 rqworker.py 的日志(可能是因为它是一个单独的线程)所以我想知道我如何(并且有可能)实现写入到同一个日志文件？

Answer 1

这可能对 OP 不再有用，但我能够将 rq Worker 的输出重定向到自定义文件的方法是通过这样获取记录器:

logger = logging.getLogger('rq.worker')

您可以向此记录器添加一个新的 FileHandler 以在您的文件上输出，并更改格式:

h = logging.FileHandler("/path/to/logfile.log")
formatter = logging.Formatter(...)
fh.setFormatter(formatter)
logger.addHandler(fh)

不过，我无法删除输出的颜色，这会导致在文本编辑器中打开日志时，ANSI 颜色代码略微困惑。

请注意，这会删除控制台的日志记录。您也可以通过添加另一个处理程序来保留它。