尝试为正确解析 Celery 日志格式(包括多行堆栈跟踪)的 logstash 创建配置。日志输出的示例可能如下所示:
[2014-04-15 15:11:27,350: DEBUG/Worker-4] Doing some work.
[2014-04-15 15:11:27,362: ERROR/MainProcess] Task core.tasks.sometask[92dc34bd-8139-4f98-b359-d78caf68381d] raised unexpected: ValueError('Foobar',)
Traceback (most recent call last):
File "./venvs/backend-33/lib/python3.4/site-packages/celery/app/trace.py", line 238, in trace_task
R = retval = fun(*args, **kwargs)
File "./venvs/backend-33/lib/python3.4/site-packages/celery/app/trace.py", line 416, in __protected_call__
return self.run(*args, **kwargs)
File "util.py", line 151, in wrapper
rv = func(self, *args, **kwargs)
File "tasks.py", line 104, in do_something_useful
raise ValueError('Foobar')
ValueError: Foobar
在某些时候,我让 Grok 准备好解析单行输出,但多行是个问题。此配置:
input {
stdin {
codec => multiline {
'negate' => true
'pattern' => '^\['
'what' => 'previous'
}
}
}
output {
stdout {
codec => rubydebug
}
}
或多或少直接取自多行编解码器的 Logstash 文档,当我运行它时,它根本不产生任何输出。
我尝试使用多行过滤器,但它产生了相同的结果,我也尝试使用 --verbose 运行 logstash,但它没有提供任何有用的信息。这是怎么回事?
最佳答案
经过更多的谷歌搜索后,我找到了答案,显然多行编解码器不能很好地处理标准输入。使用文件输入,现在可以了。
关于python - 用于 Celery 堆栈跟踪的 Logstash 多行编解码器,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23102041/