Home Sign Up Sign In
cccy0
V2EX  ›  问与答

ETL 从 mysql 到 elasticsearch 有啥好的解决方案吗

  •   
  •   cccy0 · Jul 8, 2019 · 2027 views
    This topic created in 2687 days ago, the information mentioned may be changed or developed.
  • MySQL
  • etl
  • Elasticsearch
  • 方案
    3 replies  •  2019-07-08 16:41:35 +08:00
    cccy0
    cccy0
    OP
    Jul 8, 2019
    1
    需要将数据极度复杂的处理一下, 然后入 ES, 所以必须得自定义插件, 用 flume 自定义 source 和 sink 感觉有丶复杂了
    LukeChien
    LukeChien
    Jul 8, 2019 via Android
    2
    用 canel 消费 binlog 吧，可以再加个 mq 并行处理，然后入 es
    cccy0
    cccy0
    OP
    Jul 8, 2019
    3
    @LukeChien #2 哦? , 感觉可以搞一下
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1847 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 06:43 · PVG 14:43 · LAX 22:43 · JFK 01:43
    ♥ Do have faith in what you're doing.