反向迁移
功能介绍
反向迁移是指用户将源端数据库迁移到目标数据库,应用切到目标数据库后,再将目标端新产生的数据迁移回源端。反向迁移可满足用户业务迁移逃生的诉求,保持源端、目标端两个库并行运行,在目标端数据库出问题后应用能及时切回源端数据库。openGauss提供reverse-migration工具,将openGauss数据库迁移至MySQL数据库,满足反向迁移要求。
原理简介
在openGauss端开启逻辑复制,使用JDBC获取逻辑解码,对逻辑解码进行SQL解析,通过多线程并发迁移到MySQL端。
特性优势
利用sysbench对openGauss进行压测,在100张表100个线程并发情况下,针对insert场景,整体在线迁移性能可达3w tps。
环境准备
ARM+openEuler 20.03 或 X86+CentOS 5.7
操作步骤
修改配置文件,配置文件的路径为config.yaml。
og_conn: host: "openGauss_ip" port: "5432" user: "user" password: "password" database: "postgres" charset: "utf8" driver: "org.opengauss.Driver" ASSUME_MIN_SERVER_VERSION: "9.4"//逻辑复制必备属性 REPLICATION: "database" //逻辑复制必备属性 PREFER_QUERY_MODE: "simple"//逻辑复制必备属性 slot: name: "replication_slot"//逻辑复制槽名称 include-xids: false//解码数据是否包含xid信息 skip-empty-xacts: true//解码事务是否包含空事务 waitLSN: ""//逻辑复制槽开启的lsn parallel-decode-num: 20//并行解码个数,最大20 white-table-list: ""//库表白名单 standby-connection: false//强制备机解码 decode-style: "j"//解码格式 decoding: "mppdb_decoding"//创建逻辑复制槽的工具 runnable_num: 1//并行回放个数 mysql: driver: "com.mysql.cj.jdbc.Driver" host: "mysql_ip" port: "3306" user: "user" password: "password" database: "database
编译命令。
mvn clean package
运行命令。
java -jar ./reverse-migration-mysql-1.0-SNAPSHOT.jar start/create/drop
高性能运行命令。
在Kunpeng-920 2p openEuler机器上执行如下命令。
numactl -c 0 -31 -m 0 java -Xms15G -Xmx25Gs -jar ./reverse-migration-mysql-1.0-SNAPSHOT.jar start/create/drop
卸载工具
reverse-migration工具是一个单独的Jar包,删除对应的Jar包即可卸载该工具。
注意事项
反向迁移依赖于openGauss的逻辑解码能力,相关约束请参见逻辑解码概述。
意见反馈