k8s 的日志收集有什么推荐的方案吗

2020-03-09 18:37:24 +08:00
 bigpigeon
目前我们用的是 filebeat 直接到 elasticsearch 的方案

但 filebeat 的多行匹配规则非常难用，而且 include_lines/exclude_lines 这些正则匹配很难 debug

我想看看有什么其他的收集方案试试
2249 次点击
所在节点    问与答
6 条回复
Illusionary
2020-03-09 18:41:06 +08:00
我也是 efk 方案，多行匹配就是简单粗暴的时间戳开头就为新一行日志
optional
2020-03-09 18:42:23 +08:00
多行匹配一直是问题， 因为 buffer 的问题， 经常会被下一条日志截断
zhoudaiyu
2020-03-09 21:31:29 +08:00
fluentd kafka es kibana 我们用的这种
lqy2575395
2020-03-10 09:56:19 +08:00
@Illusionary 我们也是这样，你们日志有做字段拆分吗
aidengongzhongqi
2020-09-01 10:49:32 +08:00
@lqy2575395 如何做到不同应用拆分打 tag ？
lqy2575395
2020-11-06 15:34:28 +08:00
@aidengongzhongqi 有个 @tag 的配置加一下就可以了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/651291

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX