ELK+kafka+filebeat 收集 nginx 日志的问题

2019-12-28 17:38:53 +08:00
 chaoxcores

ELK 全家桶版本:7.5.1

环境：Centos7

描述：不修改 nginx 日志格式的情况下，想要收集 nginx 的 json 格式的数据。使用了 filebeat 提供的 nginx 模板，没加入 logstash 前是可以的，加入 logstash 后收集到的就不是 json 格式了。修改日志格式的方式可以收集到，但是想偷懒...

问题：有没有什么办法又使用模板又能获得 json 格式数据？

2402 次点击
所在节点    问与答
6 条回复
fmumu
2019-12-28 18:17:06 +08:00
既然不用 logstash 就可以收集了，为啥还要硬加 logstash。不懂
Trim21
2019-12-28 18:23:12 +08:00
logstash 设置对应的 codec 为 json ？
madNeal
2019-12-28 18:36:22 +08:00
不管用不用 logstash 应该都可以，是你姿势不对吧
chaoxcores
2019-12-28 19:04:25 +08:00
@Trim21 等回头我试试
chaoxcores
2019-12-28 19:04:59 +08:00
@fmumu 中间加了 kafka
chaoxcores
2019-12-28 19:06:25 +08:00
@madNeal 我的情况就是通过 logstash 输出到 es 就不是 json 格式，使用 filebeat 模版的情况

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/633157

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX