您的位置  娱乐资讯

基于 Canal 和 Kafka 实现 MySQL 的 Binlog 近实时同步

  • 来源:互联网
  • |
  • 2020-04-02
  • |
  • 0 条评论
  • |
  • |
  • T小字 T大字

作者:Throwable
掘金:https://juejin.im/post/5e6a6746f265da575c16d678

前提

近段时间,业务系统架构基本完备,数据层面的建设比较薄弱,因为笔者目前工作重心在于搭建一个小型的数据平台。优先级比较高的一个任务就是需要近实时同步业务系统的数据(包括保存、更新或者软删除)到一个另一个数据源,持久化之前需要清洗数据并且构建一个相对合理的便于后续业务数据统计、标签系统构建等扩展功能的数据模型。基于当前团队的资源和能力,优先调研了Alibaba开源中间件Canal的使用。

这篇文章简单介绍一下如何快速地搭建一套Canal相关的组件。

关于Canal

简介

下面的简介和下一节的原理均来自于Canal项目的README:

Canal[k

免责声明:本站所有信息均搜集自互联网,并不代表本站观点,本站不对其真实合法性负责。如有信息侵犯了您的权益,请告知,本站将立刻处理。联系QQ:1640731186
  • 标签:梦见别人孩子死了
  • 编辑:刘柳
  • 相关文章
友荐云推荐
热网推荐更多>>