OceanBase 到 MySQL

选择对端数据库：

MySQL

数据链路

基本功能

功能	说明
Schema Migration	If the target schema does not exist, BladePipe will automatically generate and execute CREATE statements based on the source metadata and the mapping rule.
Full Data Migration	Migrate data by sequentially scanning data in tables and writing it in batches to the target database.
Incremental Data Sync	Sync of common DML like INSERT, UPDATE, DELETE is supported. UPDATE and DELETE for tables without primary keys are not synced by default (manual selection required).
Data Verification and Correction	Verify all existing data. Optionally, you can correct the inconsistent data based on verification results. Scheduled DataTasks are supported. For more information, see Create Verification and Correction DataJob.
Subscription Modification	Add, delete, or modify the subscribed tables with support for historical data migration. For more information, see Modify Subscription.
Position Resetting	Reset positions by timestamp or file position to consume the OceanBase data in a past period again.
Table Name Mapping	Support the mapping rules, namely, keeping the name the same as that in Source, converting the text to lowercase, converting the text to uppercase, truncating the name by "_digit" suffix.
DDL Sync	ALTER TABLE ADD COLUMN, DROP COLUMN, MODIFY COLUMN, CHANGE COLUMN ADD INDEX RENAME TABLE Other compatible DDL operations.

高级功能

功能	说明
基于 CDC 模式的增量同步	支持基于 OceanBase LogProxy 进行增量数据同步
基于 Binlog 模式的增量同步	支持基于 OceanBase Binlog 服务进行增量数据同步，此方式仅限于 OceanBase for MySQL 版本
指定租户迁移同步	指定租户以解析 ObLogProxy 事件中所带的相关信息
全量前清空目标数据	运行全量任务前清除老数据，包括重跑任务、定时全量迁移都会触发此能力
重建目标表	运行全量任务前重建目标表，包括重跑任务、定时全量迁移都会触发此能力
增量写入冲突策略	IGNORE: 主键冲突则忽略（不做写入），REPLACE: 主键冲突则整行替换
0 值时间处理	支持将 0 值时间设置成不同类型的值，防止写入对端报错
Custom Code	For more information, see Custom Code Processing, Debug Custom Code and Logging in Custom Code.
Data Filtering Conditions	Support data filtering using WHERE conditions, with SQL-92 as the SQL language. For more information, see Data Filtering.
Setting Target Primary Key	Change the primary key to another field to facilitate data aggregation and other operations.

使用示例

标题	详情
OceanBase 源端数据迁移同步	文档：OceanBase 源端数据迁移同步

---

源端数据源

前置条件

条件	说明
账号权限	具备 SYS 租户下所有表权限, 迁移同步库表 SELECT 权限
网络准备	迁移同步节点（sidecar）可连接 OceanBase server 交互端口（如 2881），LogProxy 交互端口(如有，如 2983)

任务参数

参数名称	说明
needJsonEscape	将 json 中特殊字符进行转义，以写入到对端
fullDataSqlConditionEnabled	将过滤条件拼入 SQL 中进行源端数据扫描，此参数只针对全量迁移有效
eventStoreSize	缓存解析完毕的增量事件缓存大小
obIncreMode	增量模式, 包括 LogProxy 和 Binlog 两种模式
clusterUrl	OceanBase 集群地址服务(类 name server)
obLogProxyHost	LogProxy 服务地址，常见格式为 ip:2983，LogProxy 增量模式必填项
rpcPortList	OceanBase server 节点 RPC 端口，如 host 参数为 ip1;ip2, 则此参数对应为 port1;port2, 常见端口 2882 ,LogProxy 增量模式必填项
syncAccount	LogProxy 连接 OceanBase server 的账号（可选）
syncPwd	LogProxy 连接 OceanBase server 的密码（可选）
tenant	需要订阅表所在的 tenant
workingMode	LogProxy 依赖的 libobcdc 参数，默认值为 storage

Tips: 通用参数配置请参考 通用参数及功能

---

目标端数据源

前置条件

条件	说明
账号权限	文档：MySQL / MariaDB 需要的权限
网络准备	迁移同步节点（sidecar）可连接 MySQL / MariaDB 标准交互接口（如 3306）

任务参数

参数名称	说明
keyConflictStrategy	增量写入遇到主键冲突策略: IGNORE 冲突忽略（默认） REPLACE 冲突替换（可选）
dstWholeReplace	将 INSERT 和 UPDATE 操作变成对端整行覆盖
deCycle	双向同步过滤开关，过滤特定标记的 DML/DDL
specialSqlMode	初始化数据库连接时，可以设置特定的 SQL Mode
defaultGisSRID	设置 GIS 数据类型的 SRID
dstTimeZone	目标端时区，例如 +08:00, Asia/Shanghai, America/New_York等
increParallelApplyStrategy	关系型数据库对端写入数据并行策略： KEY: 以主键进行分区并行写入 TABLE: 以表进行分区并行写入 KEY_UPGRADE_TABLE: 以主键进行分区并行写入，若有更新唯一键的操作升级为表进行分区写入

Tips: 通用参数配置请参考 通用参数及功能