[请教] 实验室设备日志文件的采集、解析、存储方案

2022-12-15 13:39:55 +08:00
 Afar

各位大佬,请教下当前实验室设备日志文件的采集、解析、存储方案,欢迎指教。

实验室设备的日志文件格式一般都是"txt"、"csv"等,但是格式和内容差别很大,就数据解析层面而言几乎没有可复制性的,想问问各位,这种场景就只能每种类型写代码逐个解析么?有没有通用性的工具或者方案,谢谢。

初步的想法是在实验室设备的电脑上安装 FTP 同步软件,把指定目录下的日志文件定时同步到一个文件服务器,然后通过定制代码的方式分别解析这些日志文件,再将解析后的数据插入关系数据库,如 MySQL 等。

谢谢。

764 次点击
所在节点    问与答
4 条回复
sujin190
2022-12-15 14:20:06 +08:00
logstash
superchijinpeng
2022-12-15 14:34:13 +08:00
Fluent Bit
Afar
2022-12-15 15:02:50 +08:00
@sujin190 正在了解 ELK ,非常感谢。
Afar
2022-12-15 15:03:09 +08:00
@superchijinpeng 谢谢。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/902697

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX