1、介绍
Bireme 是一个 Greenplum / HashData 数据仓库的增量同步工具。目
前支持 MySQL、PostgreSQL 和 MongoDB 数据源
Bireme 特性与约束:
采用小批量加载的方式提升数据同步的性能,默认加载延迟时间为 10
秒钟。
所有表在目标数据库中必须有主键
官方介绍文档:https://github.com/HashDataInc/bireme/blob/ma
ster/README_zh-cn.md
1、数据流
Bireme 采用 DELETE + COPY 的方式,将数据源的修改记录同步到
Greenplum / HashData ,相较于 INSERT + UPDATE + DELETE 的方式,
COPY 方式速度更快,性能更优。在插入数据的时候,将原来数据库中存在主
键的 id 删除,然后,再插入数据。
2、数据源
评论0