ITPub博客

首页 > 数据库 > MySQL > MySQL 上云改造,一键同步至 PolarDB MySQL 不用写脚本

MySQL 上云改造,一键同步至 PolarDB MySQL 不用写脚本

原创 MySQL 作者:NineData 时间:2026-11-19 10:56:34 0 删除 编辑

PolarDB MySQL 是阿里云推出的云原生 MySQL 兼容数据库,兼顾 MySQL 生态兼容性与弹性扩展能力,常被用作 MySQL 业务云上迁移与云数据库升级的目标端。如何把 MySQL 的存量数据、表结构与持续产生的增量变更稳定同步到 PolarDB MySQL?本文基于 NineData 数据复制功能的真实录屏演示,完整走一遍从创建复制任务、选择复制对象、配置映射、预检查,到启动后查看结构复制、全量复制、增量复制与延迟监控的全过程,并整理了 MySQL 到 PolarDB MySQL 的前置条件、Binlog 配置要求与常见问题。照着做即可完成一次完整的 MySQL 到 PolarDB MySQL 数据迁移同步。

一、NineData MySQL 到 PolarDB MySQL 数据复制能力概览

NineData 数据复制支持 MySQL 到 PolarDB MySQL 之间的结构复制、全量数据同步与增量数据同步,三种类型可在一条任务里同时启用:

• 结构复制:把 MySQL 的建表定义转换为 PolarDB MySQL 可执行的目标端 DDL 并建表,只建结构、不搬数据;

• 全量复制:同步所选对象的存量数据,完成目标端数据初始化;

• 增量复制:全量完成后,基于 MySQL Binlog 持续捕获源端变更,覆盖 INSERT / UPDATE / DELETE 与 DDL。

NineData 会依据源表定义自动推导 Schema、表名与字段映射,无需手工编写建表语句或同步脚本,配置过程全部在可视化向导里完成。本次演示按五步走完:配置数据源与目标、选择同步对象、配置字段映射、预检查、启动任务,随后在任务详情页逐页确认结果。

二、前提条件与使用限制

前提条件

• 已将源数据源(MySQL)与目标数据源(PolarDB MySQL)添加至 NineData,且两端实例可连通;

• 源端 MySQL 需开启 Binlog 日志(log_bin = ON),这是增量捕获的基础;

• binlog_format 需设置为 ROW,binlog_row_image 需设置为 FULL,保证 INSERT / UPDATE / DELETE 能被完整还原;

• 源端需为同步账号授予连接、读取待复制表以及 Binlog 复制相关权限(SELECT、REPLICATION SLAVE、REPLICATION CLIENT 等,具体以 MySQL 版本与 NineData 要求为准);目标端账号需具备建表、写入与 DDL 权限;

• 待复制的表建议带有主键或唯一键,列名保持唯一;两端字符集、时区与类型兼容性以预检查结果为准。

使用限制

• 同步对象中的每张表都应有主键或唯一约束、列名具有唯一性,否则可能导致重复同步或更新冲突;

• PolarDB MySQL 虽兼容 MySQL 协议与语法,但在数据类型细节、约束与命名大小写上仍有差异,启动前请在配置映射页与查看 DDL 弹窗中确认目标端建表语句符合预期;

• 全量初始化会占用源端与目标端一定读写资源,建议在业务低峰期执行,并提前评估两端数据库性能;

• 增量阶段可查看各类型事件计数、DDL 变更详情与读取/复制延迟曲线,确认结构变更已在目标端按相同语义完成。

三、创建 MySQL 到 PolarDB MySQL 的数据复制任务(5 步)

步骤 1:配置数据源与目标

登录 NineData 控制台,在左侧导航栏进入数据复制,单击创建复制。在第一步「数据源与目标」中填写任务名称(本次为 mysql->polardb mysql-DQ3),源数据源选择已接入的 MySQL 实例 mysql-38888,目标数据源选择 PolarDB MySQL 实例;目标对象命名规则按实际情况选择保持与源一致、全部转小写或全部转大写。复制类型同时勾选结构复制、全量复制和增量复制,覆盖完整迁移流程;复制方式选单向复制。确认无误后单击下一步。

步骤 2:选择同步对象

在第二步「选择复制对象」中,可选择全部实例,也可选择自定义对象。本例使用自定义对象:在左侧源对象树中展开源库 ds_repl_test_demo,勾选需要同步的业务表,单击添加加入右侧目标对象列表,目标端按同名规则映射。本次演示共选择 9 张业务表,涵盖基础类型、主键、复合主键、增量用例、大批量与软删除等场景。仔细核对迁移范围后单击下一步。

步骤 3:配置字段映射

在第三步「配置映射」中,源端与目标端一一对应,列表展示源字段、目标字段、字段表达式与源数据类型。本例中源库与目标库均为 ds_repl_test_demo,以 t_basic_types 表为例,id、order_no、tiny_flag、price 等字段逐一对应,字段表达式默认与源字段一致,数据类型完整保留。如需调整目标表名、列名或增加数据过滤条件,可打开映射与过滤逐项配置,也可使用批量配置统一处理。核对无误后单击保存并预检查。

步骤 4:预检查

保存配置后进入预检查页面,系统逐条校验连接、权限与日志配置。本次演示检查项全部通过(显示「成功」):目标库权限检查、源库权限检查、排序规则兼容性检查、目标数据源触发器检查,以及 MySQL 链路最关键的几项——源数据库是否开启 Binlog、binlog_format 是否为 ROW、binlog_row_image 是否为 FULL、两端字符集与时区检查。这三项 Binlog 相关配置是 MySQL 增量捕获能否建立的核心前提。预检查未通过时,可单击失败项右侧的详情排查原因,修复后重新检查;确认全绿后单击下一步。

步骤 5:启动任务

单击启动后,页面提示「启动成功」,五个向导步骤全部打勾,并展示任务名称、源数据源、目标数据源以及同名对象、存量数据、增量冲突三类处理策略。单击查看详情进入任务详情页,即可按顺序查看结构复制、全量复制、增量复制各阶段的执行情况。

四、查看同步结果:结构、全量与增量复制

结构复制

在结构复制页签查看目标对象的创建结果,列表展示状态、开始与结束时间、源/目标库、源/目标对象,顶部显示 Tables(9)。本次演示的 9 张对象状态全部为「已完成」。需要确认建表结果时,可点开操作列的「查看 DDL」,逐行核对字段类型、默认值、主键与索引约束在 PolarDB MySQL 端的落地形式,确认结构复制已正确完成。

全量复制

切换到全量复制页签,检查表级状态、完成进度和数据量。全量复制把存量数据写入目标端,本次演示同为 Tables(9),状态全部显示「已完成」。过程中可通过监控抽屉查看复制吞吐量、读取流量吞吐、复制 RPS 与读取 RPS 等曲线,并通过限流设置控制写入速率;全量复制日志会逐表打印复制完成记录,便于核对是否所有对象都已跑完。全量完成后任务自动进入增量复制阶段。

增量复制:变更捕获、DDL 与延迟监控

在增量复制页签,可查看按类型累计的操作计数与读取延迟、复制延迟两条监控曲线。源端产生业务写入与 DDL 后,链路自动将变更同步到 PolarDB MySQL 目标端,全程无需人工干预。本次演示累计 INSERT 3、DELETE 2、UPDATE 4、DDL 3,各类型变更按类别分别统计,便于核对同步范围;顶部延迟显示 0 秒,读取延迟与复制延迟曲线在右端保持低位平稳,说明捕获端与写入端都在正常工作,任务状态保持「运行中」。

点开 DDL 可查看本次增量阶段的结构变更列表,本次共 3 条:1 条 Create Index 与 2 条 Alter Table,页面列出开始执行时间、DDL 类型、源/目标对象与源 DDL 语句。再点开其中一条会并排展示源端与目标端 SQL,例如源端 CREATE INDEX idx_incr_qty 对应目标端 ALTER TABLE ... ADD KEY,ADD COLUMN 变更两侧语句一致,便于逐条验证 DDL 已被正确转换与执行。

五、常见问题(FAQ)

Q1:MySQL 同步到 PolarDB MySQL 支持哪些复制类型?

支持结构复制、全量复制和增量复制三种类型,可单独或组合使用。生产迁移建议同时勾选三种:结构复制完成建表,全量复制完成存量初始化,增量复制基于 Binlog 持续同步变更,实现平滑迁移。

Q2:源端 MySQL 需要做哪些配置?

需开启 Binlog(log_bin = ON),将 binlog_format 设置为 ROW、binlog_row_image 设置为 FULL,并为同步账号授予连接、读取待复制表与 Binlog 复制相关权限。否则预检查中的 Binlog、日志格式与日志镜像检查项会失败,增量通道无法建立。

Q3:源端与目标端账号需要哪些权限?

源端需具备待复制表的 SELECT 以及 REPLICATION SLAVE、REPLICATION CLIENT 等 Binlog 读取权限;目标端 PolarDB MySQL 账号需具备建表、写入与 ALTER 等 DDL 权限。具体清单以任务预检查的源库/目标库权限检查结果为准。

Q4:目标端存在同名表或存量数据怎么办?

在「数据源与目标」页签的处理策略中选择:预检查报错并停止任务、跳过并继续任务、删除对象并重建,或清空目标存量数据后重新写入;增量阶段的冲突处理也可单独设定。执行删除重建或清空前务必确认目标数据可以处理,避免误删。

Q5:预检查失败如何处理?

单击失败项右侧的详情查看具体原因,MySQL 链路常见为未开启 Binlog、binlog_format 非 ROW、binlog_row_image 非 FULL、源或目标连接不通、账号权限不足、待复制表缺少主键或唯一键等;手动修复后单击重新检查,直至所有检查项全部通过。

Q6:复制延迟应该看哪条曲线?

增量复制页同时展示读取延迟与复制延迟:读取延迟反映从源端 Binlog 捕获变更的滞后,复制延迟反映变更写入目标端的滞后。两条都平稳且接近,才说明链路整体健康;若只有一条升高,可据此判断瓶颈在捕获端还是写入端。业务写入瞬间曲线出现小幅尖峰属正常,重点看尖峰后是否回落到低位。

结语

通过以上步骤,我们使用 NineData 完成了 MySQL 到 PolarDB MySQL 的结构、全量和增量复制配置,并验证了对增删改与 DDL 变更的实时同步能力。相比手工导出导入,NineData 把建表映射、字段映射、Binlog 增量捕获与延迟监控整合在一条可视化链路中,大幅降低 MySQL 业务向 PolarDB MySQL 迁移的门槛与风险。如果你正在规划 MySQL 到 PolarDB MySQL 的数据迁移,不妨按本文步骤实际操作一遍。


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024772/viewspace-3189510/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: 没有了~
请登录后发表评论 登录
全部评论
NineData公众号(ID:NineData-Cloud) 发布产品功能介绍, SQL开发、数据复制、数据备份及数据对比功能。通过这些功能,可以轻松完成日常数据库开发、数据安全访问、生产数据库变更与发布、数据库备份恢复、数据迁移、容灾多活、数据仓库及数据湖构建等核心应用场景。

注册时间:2022-11-30

  • 博文量
    123
  • 访问量
    148877