各位大佬帮小弟想想办法吧,mongo 同步线上数据库到本地 mongo

109 天前
 yngzij

目前是阿里上面的 mongo 集群,领导想把数据从线上数据库增量同步到线下做数据分析,但是线下的 mongo 数据库加入不了到阿里云 mongo 的副本集合(阿里删除了 rs.add()命令),领导让我拿方案,目前想到的是解析 oplog ,问下大佬这是不是最优解呀。

感谢大佬了。

694 次点击
所在节点    问与答
7 条回复
Sosocould
109 天前
代上班可还行
zhtyytg
109 天前
用云厂商定制镜像的人技术水准难以评估,给不了建议。
如果是我的话,干脆导出数据库,重新买云服务,基于 linux 安装配置 mongo repl
dropdatabase
109 天前
阿里云 dts ?
wencan
109 天前
上次同步 mongo 还是好几年前
当时直接 dump
后面,好像都是写程序比对再拉数据,写个任务,慢慢跑
Mithril
109 天前
MongoDB 有 ChangeStream ,你直接用那个把变更发回本地的 ES 或者其他什么 OLAP 系统就行了。
比如说你本地跑个程序,监听云服务里的 Change Steam 。但通常不会允许你直接访问云数据库,记得做好安全防护。
虽说也是 oplog ,但没必要你手动去搞。
nickyadance23
109 天前
就算能加副本,把线下节点加到线上集群风险也太大了
yngzij
108 天前
@dropdatabase 领导不想花这个钱
@Mithril 感谢老哥。
@nickyadance23 确实。
@wencan 这也可以。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1048417

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX