ITPub博客

首页 > 数据库 > NoSQL > MongoDB数据库迁移

MongoDB数据库迁移

原创 NoSQL 作者:lhrbest 时间:2020-11-24 10:31:48 0 删除 编辑

MongoDB数据库迁移

https://support.huaweicloud.com/intl/zh-cn/usermanual-dds/dds_03_0054.html



通过mongoexport和mongoimport工具迁移数据

操作场景

文档数据库服务支持开启公网访问功能,通过EIP进行访问。您也可通过 弹性云服务器 的内网访问文档数据库。

要将已有的 MongoDB数据库迁移到文档数据库,需要先使用mongoexport工具对它做转储。再通过 弹性云服务器 或可访问文档数据库的设备,使用mongoimport工具将转储文件导入到 文档数据库服务

注意事项

  • 建议您尽量选择在业务低峰期迁移数据,避免在迁移过程中对业务造成影响。
  • 不支持迁移系统库admin和local。
  • 确保源库中系统库admin和local没有创建业务集合,如果已经有业务集合,必须在迁移前将这些业务集合从admin和local库中迁移出来。
  • 导入数据之前,确保源端有必要的索引,即在迁移前删除不需要的索引,创建好必要的索引。
  • 如果选择迁移分片集群,必须在目标库创建好要分片的集合,并配置数据分片。同时,迁移前必须要创建好索引。

前提条件

  1. 准备 弹性云服务器 或可访问文档数据库的设备。
    • 通过内网连接文档数据库实例,需要创建并登录弹性云服务器,请参见 购买弹性云服务器登录弹性云服务器
    • 通过公网地址连接 文档数据库实例,需具备以下条件。
      1. 为实例中的节点绑定公网地址,如何绑定公网地址,请参见《文档数据库服务快速入门》通过公网连接实例下“绑定 弹性公网IP”的内容。
      2. 保证本地设备可以访问文档数据库绑定的公网地址。
  2. 在已准备的 弹性云服务器 或可访问文档数据库的设备上,安装数据迁移工具。

    安装数据迁移工具,请参见 如何安装MongoDB客户端

    说明:

    MongoDB客户端会自带mongoexport和mongoimport工具。

导出数据

  1. 登录到已准备的 弹性云服务器 或可访问文档数据库的设备。
  2. 使用mongoexport,将源数据库转储至JSON文件。

    此处以SSL连接方式为例进行说明,如果选择普通连接方式,去掉命令中对应的 “--ssl --sslAllowInvalidCertificates”即可。

    ./ mongoexport  --host  < DB_ADDRESS>  --port  <DB_PORT>  --ssl  --sslAllowInvalidCertificates  --type json  --authenticationDatabase  <AUTH_DB-u  <DB_USER>  --db < DB_NAME--collection < DB_COLLECTION--out < DB_PATH>

    • DB_ADDRESS为数据库地址。
    • DB_PORT为数据库端口。
    • AUTH_DB为存储DB_USER信息的数据库,一般为admin。
    • DB_USER为数据库用户。
    • DB_NAME为要迁移的数据库名称。
    • DB_COLLECTION为要迁移的数据库集合。
    • DB_PATH为存储数据JSON文件所在的路径。

    出现如下提示时,输入数据库管理员对应的密码:

    Enter password:

    示例如下,命令执行完会生成 “exportfile.json”文件:

    ./mongoexport --host 192.168.1.21 --port 8635 --ssl --sslAllowInvalidCertificates --type json --authenticationDatabase admin -u rwuser --db test02 --collection Test --out /tmp/mongodb/export/exportfile.json

  3. 查看迁移结果。

    输出内容显示如下,说明迁移成功。其中,“x”表示转储数据的记录条数。

    exported x records

  4. 压缩导出的JSON文件。

    gzip exportfile.json

    压缩是为了方便网络传输,压缩后生成 “exportfile.json.gz”文件。

导入数据

  1. 登录到已准备的 弹性云服务器 或可访问文档数据库的设备。
  2. 将要导入的数据上传到 弹性云服务器 或可访问文档数据库的设备。

    根据不同的平台选择相应的上传方法。Linux下可参考命令:

    scp  < IDENTITY_FILE>  <REMOTE_USER>@ <REMOTE_ADDRESS>: <REMOTE_DIR>

    • IDENTITY_FILE为存储“exportfile.json.gz”的文件目录,该文件目录权限为600。
    • REMOTE_USER为 弹性云服务器 的操作系统用户。
    • REMOTE_ADDRESS为 弹性云服务器 的主机地址。
    • REMOTE_DIR为将“exportfile.json.gz”上传到 弹性云服务器 的文件目录。

    Windows平台下,请使用传输工具上传“exportfile.json.gz”至 弹性云服务器

  3. 解压数据包。

    gzip  -d  exportfile.json.gz

  4. 将转储文件导入到文档数据库。

    此处以SSL连接方式为例进行说明,如果选择普通连接方式,去掉命令中对应的 “--ssl --sslAllowInvalidCertificates”即可。

    ./ mongoimport --host < DB_ADDRESS--port < DB_PORT--ssl --sslAllowInvalidCertificates --type json --authenticationDatabase < AUTH_DB-u < DB_USER--db < DB_NAME--collection < DB_COLLECTION--file < DB_PATH>

    • DB_ADDRESS为数据库实例的IP地址。
    • DB_PORT为数据库端口。
    • AUTH_DB为DB_USER进行权限验证的数据库,一般为admin。
    • DB_USER为数据库管理员帐号名。
    • DB_NAME为要导入的数据库。
    • DB_COLLECTION为要导入的数据库中的集合。
    • DB_PATH为转储数据JSON文件所在的路径。

    出现如下提示时,输入数据库管理员对应的密码:

    Enter password:

    示例如下:

    ./mongoimport --host 192.168.1.21 --port 8635 --ssl --sslAllowInvalidCertificates --type json --authenticationDatabase admin -u rwuser --db test02 --collection Test --file /tmp/mongodb/export/exportfile.json

  5. 查看迁移结果。

    输出内容显示如下,说明迁移成功。其中, “x”表示转储数据的记录条数。

    imported x records



通过mongodump和mongorestore工具迁移数据


操作场景

文档数据库服务支持开启公网访问功能,通过EIP进行访问。通过 弹性云服务器 访问,迁移前需要创建一台 弹性云服务器 ,并安装mongodump和mongorestore工具。

注意事项

  • 建议您尽量选择在业务低峰期迁移数据,避免在迁移过程中对业务造成影响。
  • 不支持迁移系统库admin和local。
  • 确保源库中系统库admin和local没有创建业务集合,如果已经有业务集合,必须在迁移前将这些业务集合从admin和local库中迁移出来。
  • 导入数据之前,确保源端有必要的索引,即在迁移前删除不需要的索引,创建好必要的索引。
  • 如果选择迁移分片集群,必须在目标库创建好要分片的集合,并配置数据分片。同时,迁移前必须要创建好索引。
  • 如果使用mongodump工具备份失败(示例:备份进度至97%时报错),建议您尝试增大虚拟机磁盘空间,预留部分冗余空间,再重新执行备份。

前提条件

  1. 准备 弹性云服务器 或可访问文档数据库的设备。
    • 通过内网连接文档数据库实例,需要创建并登录弹性云服务器,请参见 购买弹性云服务器登录弹性云服务器
    • 通过公网地址连接 文档数据库实例,需具备以下条件。
      1. 为实例中的节点绑定公网地址,如何绑定公网地址,请参见《文档数据库服务快速入门》通过公网连接实例下“绑定 弹性公网IP”的内容。
      2. 保证本地设备可以访问文档数据库绑定的公网地址。
  2. 在已准备的 弹性云服务器 或可访问文档数据库的设备上,安装数据迁移工具。

    安装数据迁移工具,请参见 如何安装MongoDB客户端

    说明:

    MongoDB客户端会自带mongoexport和mongoimport工具。

备份数据

  1. 登录到已准备的 弹性云服务器 或可访问文档数据库的设备。
  2. 使用mongodump工具,备份源数据库中的数据。

    此处以SSL连接方式为例进行说明,如果选择普通连接方式,去掉命令中对应的“ --ssl --sslCAFile < FILE_PATH- -sslAllowInvalidCertificates”即可。

    mongodump --host  < DB_HOST>  --port  <DB_PORT>  -u  <DB_USER>  --authenticationDatabase  <AUTH_DB>  --ssl --sslCAFile< FILE_PATH- -sslAllowInvalidCertificates

    • DB_HOST为数据库地址。
    • DB_PORT为数据库端口号。
    • DB_USER为数据库用户名。
    • AUTH_DB为存储DB_USER信息的数据库,一般为admin。
    • FILE_PATH是存放根证书的路径。

    出现如下提示时,输入数据库管理员对应的密码:

    Enter password:

    示例如下,命令执行后,源数据库中的数据将备份至当前目录下的“dump”文件夹中。

    ./mongodump --host 192.168.6.39 --port 8635 -u rwuser --authenticationDatabase admin --ssl --sslCAFile /tmp/ca.crt --sslAllowInvalidCertificates

    2019-03-04T18:42:10.687+0800    writing admin.system.users to
    2019-03-04T18:42:10.688+0800    done dumping admin.system.users (1 document)
    2019-03-04T18:42:10.688+0800    writing admin.system.roles to
    2019-03-04T18:42:10.690+0800    done dumping admin.system.roles (0 documents)
    2019-03-04T18:42:10.690+0800    writing admin.system.version to
    2019-03-04T18:42:10.691+0800    done dumping admin.system.version (2 documents)
    2019-03-04T18:42:10.691+0800    writing test.test_collection to
    2019-03-04T18:42:10.691+0800    writing admin.system.profile to
    2019-03-04T18:42:10.692+0800    done dumping admin.system.profile (4 documents)
    2019-03-04T18:42:10.695+0800    done dumping test.test_collection (198 documents)

导入数据

  1. 登录到已准备的 弹性云服务器 或可访问文档数据库的设备。
  2. 将要导入的数据上传到 弹性云服务器 或可访问文档数据库的设备。

    根据不同的平台选择相应的上传方法。Linux下可参考命令:

    scp -r  < IDENTITY_DIR>  <REMOTE_USER>@ <REMOTE_ADDRESS>: <REMOTE_DIR>

    • IDENTITY_DIR为备份文件夹所在的目录。
    • REMOTE_USER为 1中的 弹性云服务器 的操作系统用户。
    • REMOTE_ADDRESS为 1中的 弹性云服务器 的主机地址。
    • REMOTE_DIR为待导入的目标 弹性云服务器 的文件目录。

    Windows平台下,请使用传输工具上传备份目录至 弹性云服务器

  3. 将备份的数据导入到文档数据库。

    此处以SSL连接方式为例进行说明,如果选择普通连接方式,去掉命令中对应的“ --ssl --sslCAFile < FILE_PATH- -sslAllowInvalidCertificates”即可。

    ./mongorestore --host  < DB_HOST>   --port  <DB_PORT>  -u  <DB_USER>  --authenticationDatabase  <AUTH_DB>   <Backup directory>   --ssl --sslCAFile < FILE_PATH- -sslAllowInvalidCertificates

    • DB_HOST为数据库地址。
    • DB_PORT为数据库端口号。
    • DB_USER为数据库管理员帐号名,默认为rwuser。
    • AUTH_DB为DB_USER进行权限验证的数据库,一般为admin。
    • Backup directory:备份文件存储目录,默认为“dump”。
    • FILE_PATH是存放根证书的路径。

    出现如下提示时,输入数据库管理员对应的密码:

    Enter password:

    示例如下:

    ./mongorestore --host 192.168.6.187 --port 8635 -u rwuser --authenticationDatabase admin dump  --ssl --sslCAFile /tmp/ca.crt  - -sslAllowInvalidCertificates

    2019-03-05T14:19:43.240+0800    preparing collections to restore from
    2019-03-05T14:19:43.243+0800    reading metadata for test.test_collection from dump/test/test_collection.metadata.json
    2019-03-05T14:19:43.263+0800    restoring test.test_collection from dump/test/test_collection.bson
    2019-03-05T14:19:43.271+0800    restoring indexes for collection test.test_collection from metadata
    2019-03-05T14:19:43.273+0800    finished restoring test.test_collection (198 documents)
    2019-03-05T14:19:43.273+0800    restoring users from dump/admin/system.users.bson
    2019-03-05T14:19:43.305+0800    roles file 'dump/admin/system.roles.bson' is empty; skipping roles restoration
    2019-03-05T14:19:43.305+0800    restoring roles from dump/admin/system.roles.bson
    2019-03-05T14:19:43.333+0800    done




通过数据复制服务迁移数据

数据复制服务(Data Replication Service,简称DRS)支持在多种场景下,将源库数据迁移到目标文档数据库实例,最大限度允许迁移过程中业务继续对外提供使用,有效地将业务系统中断时间和业务影响最小化,完成数据库平滑迁移工作。

DRS支持的源库类型如下:

  • 本地自建MongoDB数据库
  • ECS自建MongoDB数据库
  • 其他云上MongoDB数据库
  • 华为云DDS实例

支持的数据库版本如下:

  • 集群3.4和4.0
  • 副本集3.4和4.0
  • 单节点3.4和4.0
说明:

目前不支持高版本到低版本的迁移。

迁移场景

场景一:全量迁移

全量迁移模式为数据库一次性迁移,适用于可中断业务的数据库迁移场景,全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库,包括:表、视图、存储过程等。

说明:

如果用户只进行全量迁移时,建议停止对源数据库的操作,否则迁移过程中源数据库产生的新数据不会同步到目标数据库。

目前通过DRS可以实现如下实例类型之间的全量迁移:

  • 副本集到单节点
  • 副本集到副本集
  • 副本集到集群
  • 单节点到单节点
  • 单节点到副本集
  • 单节点到集群
  • 集群到集群

场景二:全量+增量迁移

全量+增量的迁移模式为数据库持续性迁移,适用于对业务中断敏感的场景,通过全量迁移过程中完成的目标端数据库的初始化后,增量迁移阶段通过解析日志等技术,将远端和目标端数据库保持数据持续一致。

说明:

选择“全量+增量”迁移模式,增量迁移可以在全量迁移完成的基础上实现数据的持续同步,无需中断业务,实现迁移过程中源业务和数据库继续对外提供访问。

目前通过DRS可以实现如下实例类型之间的全量+增量迁移:

  • 副本集到单节点
  • 副本集到副本集
  • 副本集到集群
  • 单节点到单节点
  • 单节点到副本集
  • 单节点到集群
  • 集群到集群

使用须知

使用数据复制服务进行数据迁移时,为了提高数据迁移的稳定性和安全性,请先阅读以确保数据库实例已满足 迁移条件

迁移操作

一次完整的 实时迁移,是通过创建 实时迁移任务,以迁移任务作为数据库迁移的导向,依次进行迁移进度观察、迁移日志分析、迁移数据一致性对比等多项操作。通过多项指标和数据的对比分析,可以帮助您确定合适的业务割接时机,实现最小化业务中断的数据库迁移。

一次完整的 实时迁移包含如下过程:

图1 迁移流程

具体的迁移操作请参考《数据复制服务最佳实践》中“ MongoDB数据库迁移”章节。

MongoDB数据库迁移

数据复制服务(Data Replication Service,简称DRS)支持将ECS自建数据库的数据迁移到本云文档数据库服务(Document Database Service,以下简称DDS)实例。通过DRS提供的在线迁移任务,实现在数据库迁移过程中业务和数据库不停机,业务中断时间最小化。

本章节主要介绍了通过DRS将ECS自建数据库在线迁移至本云DDS的任务配置流程。支持以下网络场景:

  • 源数据库和目标数据库属于同一个VPC网络内
  • 源数据库和目标数据库属于不同VPC网络内

网络示意图

图1 同一VPC网路
图2 同区域不同VPC网络

迁移流程

图3 迁移流程图

迁移建议 (重要)

  • 数据库迁移与环境多样性和人为操作均有密切关系,为了确保迁移的平顺,建议您在进行正式的数据库迁移之前进行一次演练,可以帮助您提前发现问题并解决问题,如何最小化对数据库的影响请参考如下建议。
  • 强烈建议您在启动任务时选择 “稍后启动”功能,将启动时间设置在业务低峰期,相对静止的数据可以有效提升一次性迁移成功率,避免迁移对业务造成性能影响。

迁移须知 (重要)

须知:

在创建迁移任务之前,请您务必仔细阅读迁移须知。

参考《数据复制服务快速入门》中的“ 使用须知”章节。

迁移准备

  1. 权限准备:
    当使用 DRS 将本地数据库的数据迁移到本云DDS实例时,在不同迁移类型情况下,对源数据库和目标数据库的帐号权限要求如 表1所示:
    表1 迁移帐号权限

    迁移类型

    全量迁移

    增量迁移

    源数据库

    • 副本集:连接源数据库的用户权限需要对admin数据库有readAnyDatabase权限。
    • 集群:连接源数据库的用户权限需要对admin数据库有readAnyDatabase权限,对config数据库有read权限。
    • 单节点:连接源数据库的用户权限需要对admin数据库有readAnyDatabase权限。
    • 副本集:连接源数据库的用户权限需要对admin数据库有readAnyDatabase权限,对local数据库有read权限。
    • 单节点:连接源数据库的用户权限需要对admin数据库有readAnyDatabase权限,对local数据库有read权限。
    • 集群:连接源数据库mongos节点的用户权限需要对admin数据库有readAnyDatabase权限,对config数据库有read权限, 连接源数据库分片节点的用户权限需要对admin数据库有readAnyDatabase权限,对local数据库有read权限。。

    目标数据库

    连接目标数据库的用户权限需要对admin数据库有readAnyDatabase权限,对目标数据库有readWrite权限。

    • 源数据库的权限设置:

      需要确保源数据库MongoDB的帐号具备 表1的权限,若权限不足,需要在源数据库端创建高权限的帐号。

    • 目标数据库的权限设置:

      本云DDS实例使用初始帐号即可。

  2. 网络准备:
    • 源数据库所在的region需要和目标DDS所在的region保持一致。
    • 源数据库可以与目标DDS实例在同一个VPC,也可以不在同一个VPC。
      • 当不在同一个VPC的时候,要求源数据库实例和目标端DDS实例所处的子网处于不同网段,此时需要通过建立对等连接实现网络互通,具体操作请参见《虚拟私有云用户指南》中“ VPC对等连接”章节。
      • 当在同一VPC的时候,网络默认是互通的。
  3. 安全规则准备:
    • 同一VPC场景下,默认网络是连通的,不需要单独设置安全组。
    • 不同VPC场景下,通过建立对等连接就可以实现网络互通,不需要单独设置安全组。
  4. 其他事项准备:

    由于迁移过程不会迁移MongoDB数据库的用户信息以及相关参数,需要自行将上述信息导出后,手动添加到目标DDS中。

迁移步骤

  1. 创建迁移任务

    1. 登录管理控制台,在服务列表中选择 数据库 >  数据复制服务,进入数据复制服务信息页面。
    2. “在线迁移管理”页面,单击右上角 “创建迁移任务”,进入迁移任务信息页面。
    3. 在“迁移实例”页面,填选任务名称、通知收件人、描述和迁移实例信息。
      图4 迁移实例信息
      表2 任务信息

      参数

      描述

      任务名称

      任务名称在4位到64位之间,必须以字母开头,不区分大小写,可以包含字母、数字、中划线或下划线,不能包含其他的特殊字符。

      任务异常通知设置

      该项为可选参数,开启之后,需要填写手机号码或者邮箱作为指定收件人。当迁移任务状态异常时,系统将发送通知给指定收件人。

      说明:

      收到确认短信或邮件之后,需要在48小时内处理,否则该功能订阅无效。

      时延阈值

      增量迁移中,源数据库和目标数据库之间的同步有时会存在一个时间差,称为时延,单位为秒。

      时延阈值设置是指时延超过一定的值后(时间阈值范围为1—3600s),DRS可以发送通知给指定收件人。

      说明:

      首次进入增量迁移阶段,会有较多数据等待同步,存在较大的时延,属于正常情况,不在此功能的监控范围之内。

      描述

      描述不能超过256位,且不能包含!=<>&'"特殊字符。

      表3 迁移实例信息

      参数

      描述

      数据流动方向

      选择入云。

      源数据库引擎

      选择MongoDB数据库引擎。

      目标数据库引擎

      选择DDS数据库引擎。

      网络类型

      选择VPC网络。

      目标数据库实例

      您所创建的本云DDS实例。

      迁移模式

      此处以全量+增量模式为示例。

      • 全量:该模式为数据库一次性迁移,适用于可中断业务的 数据库迁移场景,全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库,包括:表、视图、存储过程等。
        说明:

        如果用户只进行全量迁移时,建议停止对源数据库的操作,否则迁移过程中源数据库产生的新数据不会同步到目标数据库。

      • 全量+增量:该模式为数据库持续性迁移,适用于对业务中断敏感的场景,通过全量迁移过程中完成的目标端数据库的初始化后,增量迁移阶段通过解析日志等技术,将远端和目标端数据库保持数据持续一致。
      说明:

      选择 “全量+增量”迁移模式,增量迁移可以在全量迁移完成的基础上实现数据的持续同步,无需中断业务,实现迁移过程中源业务和数据库继续对外提供访问。

    4. “源库及目标库”信息页面,迁移实例创建成功后,填选源库信息和目标库信息,建议您单击 “源库和目标库”处的 “测试连接”,分别测试并确定与源库和目标库连通后,勾选协议,单击 “下一步”
      图5 源库及目标库信息
      表4 源库信息

      参数

      描述

      源库类型

      选择“非DDS实例”。

      VPC

      源数据库实例所在的虚拟专用网络,可以对不同业务进行网络隔离。您需要创建或选择所需的虚拟私有云。如何创建虚拟私有云,请参见《虚拟私有云用户指南》中的“ 创建虚拟私有云基本信息及默认子网”章节。

      子网

      通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。子网在可用分区内才会有效,创建源数据库实例的子网需要开启DHCP功能,在创建过程中也不能关闭已选子网的DHCP功能。

      如何创建子网,请参见《虚拟私有云用户指南》中的“ 创建虚拟私有云基本信息及默认子网”章节。

      IP地址或域名

      配置源MongoDB数据库实例的访问地址或域名。

      端口

      配置源MongoDB数据库实例的服务端口,可输入范围为1~65535间的整数。

      数据库用户名

      访问源MongoDB数据库的用户名。

      数据库密码

      访问源MongoDB数据库的用户名所对应的密码。

      SSL安全连接

      您可以选择开启SSL安全连接,对迁移链路进行加密,开启之后,需要您上传加密证书。

      表5 目标库信息

      参数

      描述

      数据库实例名称

      默认为创建迁移任务时选择的已创建的本云DDS实例,不可进行修改。

      数据库用户名

      访问目标数据库本云DDS的用户名。

      数据库密码

      访问目标数据库本云DDS的用户名所对应的密码。

    5. “迁移设置”页面,设置迁移对象。
      图6 迁移对象
      表6 迁移模式和迁移对象

      参数

      描述

      迁移对象

      选择您需要迁移的对象。迁移对象选择的粒度可以为库和表,对象迁移到DDS实例后,对象名将会保持与源数据库MongoDB实例对象名一致且无法修改。

    6. “预检查”页面,进行迁移任务预校验,校验是否可进行任务迁移。
      • 查看检查结果,如有失败的检查项,需要修复失败项后,单击“重新校验”按钮重新进行迁移任务预校验。

        预检查失败项处理建议请参见《数据复制服务用户指南》中的“ 预检查失败项修复方法”。

      • 预检查完成后,且所有检查项结果均成功时,单击 “下一步”
      图7 预检查
      说明:

      所有检查项结果均成功时,若存在告警,需要阅读并确认告警详情后才可以继续执行下一步操作。

    7. “任务确认”页面,选择迁移任务的启动时间,勾选协议,单击 “启动任务”,提交迁移任务。
      说明:
      • 迁移任务的启动时间可以根据业务需求,设置为“立即启动”或“稍后启动”。
      • 预计迁移任务启动后,会对源数据库和目标数据库的性能产生影响,建议选择业务低峰期,合理设置迁移任务的启动时间。如果迁移不可避免业务高峰期,推荐使用迁移限速功能,即 “流速模式”选择 “限速”
    8. 迁移任务提交后,您可以返回 “在线迁移管理”页面,查看迁移任务状态。

  2. 任务管理

    迁移任务启动后,会经历全量迁移和增量迁移两个阶段,对于不同阶段的迁移任务,您可以进行任务管理。
    • 全量迁移

      查看迁移进度:全量迁移中的任务,您可单击任务名称,在 “迁移进度”页签下,查看全量迁移进度。当全量迁移进度显示为100%,表示全量迁移已经完成。

    • 增量迁移
      • 查看时延监控:全量迁移完成后,开始进行增量迁移。对于增量迁移中的任务,您可单击任务名称,在 “迁移进度”页签下,查看增量迁移同步时延, 当时延为0s时,说明源数据库和目标数据库的数据是实时同步的。您也可以使用 “迁移对比”页签进行一致性对比。
        图8 查看时延监控
      • 查看迁移对比:为了尽可能减少业务的影响和业务中断时间,增量迁移中的任务,您可单击任务名称,在 “迁移对比”页签下,建议按照如下流程进行 迁移对比,以便确定合适的业务割接时机。
        图9 迁移对比流程

        具体的迁移对比操作及注意事项请参考《数据复制服务用户指南》中“ 对比迁移项”章节。

  3. 割接建议

    建议您选择一个业务低峰期,开始正式系统割接流程。割接前,请您确认至少在业务低峰期有过一次完整的数据对比。可以结合数据对比的 “稍后启动”功能,选择业务低峰期进行数据对比,以便得到更为具有参考性的对比结果。由于同步具有轻微的时差,在数据持续操作过程中进行对比任务,可能会出现少量数据不一致对比结果,从而失去参考意义。

    1. 先中断业务(如果业务负载非常轻,也可以尝试不中断业务)。
    2. 在源数据库端执行如下语句,并观察在1-5分钟内若无任何新会话执行SQL ,则可认为业务已经完全停止。
      db.currentOp()
      说明:

      上述语句查询到的进程列表中,包括DRS迁移实例的连接,您需要确认除DRS迁移实例的连接外无任何新会话执行SQL,即可认为业务已经完全停止。

    3. 通过DRS迁移任务监控页面进行观察同步时延,保持数据同步时延为0,并稳定保持一段时间;同时,您可以使用数据级对比功能,进行割接前的最后一次数据级对比,耗时可参考之前的对比记录。
      • 如果时间允许,则选择全部对比。
      • 如果时间不允许,则推荐对比活跃表,关键业务表,第二步对比多次存在差异的表等。
    4. 确定系统割接时机,业务系统指向本云数据库,业务对外恢复使用,迁移完成。

  4. 迁移结束

    1. 结束迁移任务:业务系统和数据库切换至本云后,为了防止源数据库的操作继续同步到目标数据库,造成数据覆盖问题,此时您可选择结束迁移任务,该操作仅删除了迁移实例,迁移任务仍显示在任务列表中,您可以进行查看或删除。结束迁移任务后,DRS将不再计费。
    2. 删除迁移任务:对于已结束的迁移任务,您可选择删除任务。该操作将一并删除迁移任务,删除迁移任务后,该任务将不会出现在任务列表中。







About Me

........................................................................................................................

● 本文作者:小麦苗,部分内容整理自网络,若有侵权请联系小麦苗删除

● 本文在个人微 信公众号( DB宝)上有同步更新

● QQ群号: 230161599 、618766405,微信群私聊

● 个人QQ号(646634621),微 信号(db_bao),注明添加缘由

● 于 2020年11月完成

● 最新修改时间:2020年11月

● 版权所有,欢迎分享本文,转载请保留出处

........................................................................................................................

小麦苗的微店https://weidian.com/s/793741433?wfr=c&ifr=shopdetail

● 小麦苗出版的数据库类丛书: http://blog.itpub.net/26736162/viewspace-2142121/

小麦苗OCP、OCM、高可用、MySQL、DBA学习班http://blog.itpub.net/26736162/viewspace-2148098/

● 数据库笔试面试题库及解答: http://blog.itpub.net/26736162/viewspace-2134706/

........................................................................................................................

请扫描下面的二维码来关注小麦苗的微 信公众号( DB宝)及QQ群(230161599、618766405)、添加小麦苗微 信(db_bao), 学习最实用的数据库技术。

........................................................................................................................

 

 



来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/26736162/viewspace-2736324/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论
【QQ:646634621】【微信:db_bao】【微信公众号:DB宝】【11g、12c OCM】【QQ群:230161599、618766405】【《数据库笔试面试宝典》作者】【OCP、OCM、高可用(RAC+DG+OGG)、MySQL培训班已开讲,只讲实用内容】

注册时间:2012-09-23

  • 博文量
    1586
  • 访问量
    9183928