小程序埋点上报的数据，往 mysql 存是可以的吗

[Ufo666]

公司小程序，加了手动埋点(他们希望数据人性化一点，而不是每个地方都打，打出来的内容很死板)，所以在一些关键事件打上上报事件的 api 接口，发到服务器，服务器存入 mysql 。 现在有 38w 行记录了，感觉后面会撑爆，有点担心，要不要换个 es ？(特小一个公司)

[documentzhangx66]

会不会爆，要通过监控各设备性能，来观察性能是否足够。

做好主备节点、UPS 、备份。

进行删、改前，先在实验环境下测试好了后，再去生产环境上做。

[documentzhangx66]

如果为了稳，建议直接上 Oracle ，地球上最强数据库。PG 什么的就免了，最近有团体在各平台鼓吹 PG ，请不要上当。

[cheng6563]

才 300 万你慌个啥，特小的公司？那等 300 亿再说吧

[ychost]

用时序数据库简单点，比如 influxDB ，还能直观看到一个人的操作曲线

[dayeye2006199]

做成文件存对象存储吧，便宜。

下次要分析的时候再入库

[realpg]

日增 oplog 记录条数 1700 万条
MySQL 存储 分表 备份 无压力
这玩意就看你架构设计了

我们的方案
开一个 office E5,买 25 个手机号, 25 个 onedrive 5T
每日凌晨 1 点-2 点 cron 生成次日表名
每日凌晨 3 点-4 点备份昨日数据表 sql,bzip2,删表,rclone 怼 onedrive 备份,联通 onedrive 超快,基本很快就能备份完,删本地文件

[hefish]

特小的公司还要存着这些数据，一直存到地老天荒啊。。。那恭喜这个特小公司已经一夜变成世界 500 强了。。

[diggzhang]

按日分区归档。
按周建新库。

[krixaar]

@documentzhangx66 #42 用 Oracle 当心哪天 boss 非得要“去 IOE”然后你再搞迁移……

[limbo0]

埋点只能是越来越多, 长远考虑还是换离线, 当然如果哦几年内 mysql 能撑住不动也行啊

[MrTLJH]

@realpg 手机号咋买的，求问

[realpg]

@MrTLJH
群里找人,给 50,收个微软验证码,还不容易?

[aheadlead]

@documentzhangx66 #41 乐了 36 万行数据你让人上 oracle 合着你给他掏钱还是怎么的？

[caqiko]

就你一个写代码的，你部署 es 老板舍得花这个钱吗？

[keymao]

写个定时任务，检测数据条目超过一定数量就进行归档，按照时间将很久之前的先归档 放到其他数据表

[Yunen]

@realpg E5 开子号还需要手机号？这玩意不是想创就创嘛，租户管理员直接新建就完事了...

[knightdf]

直接写 csv,tsv 文件就行了