有 Alibaba canal-adapter 的替代品吗？

2021-10-20 13:44:53 +08:00
 Saxton

目前在做 mysql 同步数据到 es，es 负责查询那块，了解到阿里巴巴的 canal 增量同步工具，便使用了自带的 canal-adapter 组件，但发现这个组件的文档已经几百年没更新并且维护人员流失了，很多东西都是我通过阅读源码才得知改了，而且复杂一点的 SQL 就解析不了了，局限性很大

2731 次点击
所在节点    MySQL
7 条回复
ospider
2021-10-20 14:02:24 +08:00
前几天刚刚被这个工具坑了，比较简单的同步逻辑还是自己写吧……
liprais
2021-10-20 14:04:22 +08:00
cdc + debezium + kafka 呗
后面随便玩
sunshengkai27
2021-10-20 15:44:13 +08:00
canal 自带的 adapter?
MartinWu
2021-10-20 17:34:06 +08:00
我们最近刚上 flink cdc connector 这个车。
bootvue
2021-10-20 18:02:26 +08:00
logstash 插件

或者阿里粑粑的 datax 都可以写 sql 增量同步
Geekerstar
2021-10-20 22:08:12 +08:00
目前在用这个，坑确实比较多
starxg
2021-10-21 13:07:03 +08:00
canal->kafka->消费者->代码解析->es

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/809192

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX