設計

應用場景

使用教程

預覽

DBSyncer是一款開源的數(shù)據(jù)同步中間件，提供MySQL、Oracle、SqlServer、PostgreSQL、Elasticsearch(ES)、Kafka、File、SQL等同步場景。

支持上傳插件自定義同步轉換業(yè)務，提供監(jiān)控全量和增量數(shù)據(jù)統(tǒng)計圖、應用性能預警等。

特點

組合驅動 ，自定義庫同步到庫組合，關系型數(shù)據(jù)庫與非關系型之間組合，任意搭配表同步映射關系

實時監(jiān)控 ，驅動全量或增量實時同步運行狀態(tài)、結果、同步日志和系統(tǒng)日志

開發(fā)插件 ，自定義轉化同步邏輯

設計

架構圖

基于 Spring Boot + MyBatis Plus + Vue & Element 實現(xiàn)的后臺管理系統(tǒng) + 用戶小程序，支持 RBAC 動態(tài)權限、多租戶、數(shù)據(jù)權限、工作流、三方登錄、支付、短信、商城等功能

項目地址：https://github.com/YunaiV/ruoyi-vue-pro

視頻教程：https://doc.iocoder.cn/video/

應用場景

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 實現(xiàn)的后臺管理系統(tǒng) + 用戶小程序，支持 RBAC 動態(tài)權限、多租戶、數(shù)據(jù)權限、工作流、三方登錄、支付、短信、商城等功能

項目地址：https://github.com/YunaiV/yudao-cloud

視頻教程：https://doc.iocoder.cn/video/

使用教程

1.啟動 代理 和 數(shù)據(jù)庫 服務

2.準備測試賬號，test

3.分配sysadmin角色

4.分配指定數(shù)據(jù)庫權限

PostgreSQL

通過復制流技術監(jiān)聽增量事件，基于內置插件pgoutput、test_decoding實現(xiàn)解析wal日志

1、修改postgresql.conf文件，重啟服務

wal_level=logical

2、授予賬號權限LOGIN和REPLICATION

File

監(jiān)聽文件修改時間得到變化文件，通過文件偏移量讀取最新數(shù)據(jù)

https://gitee.com/ghi/dbsyncer/issues/I55EP5

ES

定時獲取增量數(shù)據(jù)。

賬號具有訪問權限。

日志

建議MySQL、SqlServer、PostgreSQL都使用日志

定時

假設源表數(shù)據(jù)格式

預覽

驅動管理

驅動詳情

驅動表字段關系配置

監(jiān)控

上傳插件

開源地址