linux 部署canal 同步数据到rabbitmq
时间: 2023-12-15 10:03:47 浏览: 96
Canal 是阿里巴巴开源的一款 MySQL 数据库 binlog 增量订阅&消费组件,可将 MySQL 数据库的增量数据同步到其它数据存储介质中,如 RabbitMQ。
以下是部署 Canal 同步数据到 RabbitMQ 的步骤:
1. 安装 RabbitMQ
在 Linux 上安装 RabbitMQ,可以参考官方文档:https://www.rabbitmq.com/install-debian.html
2. 安装 Canal
可以从官方 Github 下载 Canal:https://github.com/alibaba/canal
3. 配置 Canal
在 Canal 的 conf 目录中,有两个配置文件需要修改:instance.properties 和 canal.properties。
instance.properties 配置 MySQL 数据库的连接信息,如下所示:
```
canal.instance.master.address=127.0.0.1:3306
canal.instance.master.journal.name=mysql-bin.000001
canal.instance.master.position=4
canal.instance.dbUsername=root
canal.instance.dbPassword=123456
canal.instance.connectionCharset=UTF-8
```
canal.properties 配置 Canal 的基本信息,如下所示:
```
canal.serverMode = tcp
canal.tcp.port = 11111
canal.instance.enable.druid=false
canal.instance.filter.regex=.*\\..*
canal.instance.filter.black.regex=.*\\..*_bak,mysql.*
```
其中,canal.tcp.port 是 Canal Server 监听的端口号。
4. 配置 RabbitMQ
创建一个名为 canal 的 RabbitMQ Exchange,并创建一个名为 canal 的 RabbitMQ Queue,将 canal Exchange 绑定到 canal Queue 上。
5. 启动 Canal
在 Canal 的 bin 目录中,执行以下命令启动 Canal:
```
sh startup.sh
```
6. 启动 RabbitMQ Consumer
在 RabbitMQ Consumer 中,监听 canal Queue 中的消息,将消息写入到目标数据存储中。
以上是部署 Canal 同步数据到 RabbitMQ 的基本步骤,具体可根据实际情况进行调整。
阅读全文