tencent cloud

本文介绍使用 DTS 数据迁移功能从 MongoDB 迁移数据至腾讯云数据库 MongoDB 的操作指导。

MongoDB 支持副本集、分片集群之间的异构迁移，即源端、目标端架构为副本集 - 副本集、副本集 - 分片集群、分片集群 - 副本集、分片集群 - 分片集群的4种场景。

注意事项

• DTS 在执行全量数据迁移时，会占用一定源端实例资源，可能会导致源实例负载上升，增加数据库自身压力。如果您的数据库配置过低，建议您在业务低峰期进行迁移。
• 外网实例迁移时，请确保源实例服务在外网环境下可访问。

前提条件

• 已 创建云数据库 MongoDB。
• 源数据库和目标数据库符合迁移功能和版本要求，请参见 数据迁移支持的数据库 进行核对。
• 已完成 准备工作。
• 需要在源实例创建一个只读账号供迁移使用，否则迁移前校验步骤将不通过。

  use admin
  db.createUser({
   user: "username",
   pwd: "password",
   roles:
       [
           {role: "readAnyDatabase", db: "admin"},
           {role: "read", db: "local"}
       ]
  })
  

约束限制

• 为保障迁移效率，CVM 自建实例迁移不支持跨地域迁移。
• 由于单节点无 Oplog，所以自建实例是单节点时，不支持增量迁移。

操作限制

• 迁移过程中请勿进行如下操作，否则会导致迁移任务失败。
  • 请勿修改、删除源数据库和目标数据库中用户信息（包括用户名、密码和权限）和端口号。
  • 请勿在源库上执行清除 oplog 的操作。
  • 在数据迁移阶段，请勿删除目的端数据库 TencetDTSData。
  • 在数据迁移阶段，请谨慎操作目的端数据，避免最终数据不一致。
  • 分片迁移请勿在源端执行除事务外的 DDL 操作，DTS 会过滤分片集群的 DDL 操作，避免导致最终数据不一致。
• 如果仅执行全量数据迁移，请勿在迁移过程中向源实例中写入新的数据，否则会导致源和目标数据不一致。针对有数据写入的场景，为实时保持数据一致性，建议选择全量+增量数据迁移。

支持的 SQL 操作

说明：

仅副本集迁移支持 DDL 操作，分片迁移会过滤 DDL 操作（事务除外）。

环境要求

操作步骤

1. 登录 DTS 控制台，在左侧导航选择数据迁移页，单击新建迁移任务，进入新建迁移任务页面。
2. 在新建迁移任务页面，选择迁移的源实例类型和所属地域，目标实例类型和所属地域，规格等，然后单击立即购买。

   配置项	说明
   源实例类型	请根据您的源数据库类型选择，购买后不可修改。本场景选择“MongoDB”。
   源实例地域	选择源数据库所属地域。如果源库为自建数据库，选择离自建数据库最近的一个地域即可。
   目标实例类型	请根据您的目标数据库类型选择，购买后不可修改。本场景选择“MongoDB”。
   目标实例地域	选择目标数据库所属地域。
   规格	根据业务情况选择迁移链路的规格，不同规格的性能和计费详情请参考 计费概述。

3. 在设置源和目标数据库页面，完成任务设置、源库设置和目标库设置。

   说明：

   请在源实例创建一个只读帐号供迁移使用，否则迁移前校验步骤将不通过。

   

   设置类型	配置项	说明
   任务设置	任务名称	设置一个具有业务意义的名称，便于任务识别。
   	运行模式	立即执行：完成任务校验通过后立即启动任务。 定时执行：需要配置一个任务执行时间，到时间后启动任务。
   	标签	标签用于从不同维度对资源分类管理。如现有标签不符合您的要求，请前往控制台管理标签。
   源库设置	源库类型	购买时选择的源库类型，不可修改。
   	所属地域	购买时选择的源库地域，不可修改。
   	接入类型	请根据您的场景选择，本场景以“云数据库”为例，不同接入类型的准备工作请参考 准备工作概述。 公网：源数据库可以通过公网 IP 访问。 云主机自建：源数据库部署在 腾讯云服务器 CVM 上。 专线接入：源数据库可以通过 专线接入 方式与腾讯云私有网络打通。 VPN接入：源数据库可以通过 VPN 连接 方式与腾讯云私有网络打通。 云数据库：源数据库属于腾讯云数据库实例。 云联网：源数据库可以通过 云联网 与腾讯云私有网络打通。 对于第三方云厂商数据库，一般可以选择公网方式，也可以选择 VPN 接入，专线或者云联网的方式，需要根据实际的网络情况选择。
   	是否跨账号	接入类型选择“云数据库”时需要配置。 本账号：源数据库实例和目标数据库实例所属的主账号为同一个腾讯云主账号。 跨账号：源数据库实例和目标数据库实例所属的主账号为不同的腾讯云主账号。
   	数据库实例	选择源库的实例 ID。
   	帐号	源库 MongoDB 的数据库帐号，帐号权限需要满足要求。
   	密码	源库 MongoDB 的数据库帐号的密码。
   目标库设置	目标库类型	购买时选择的目标库类型，不可修改。
   	所属地域	购买时选择的目标库地域，不可修改。
   	接入类型	本场景选择“云数据库”。
   	数据库实例	选择目标库的实例 ID。
   	帐号	目标库的数据库帐号，帐号权限需要满足要求。
   	密码	目标库的数据库帐号的密码。

4. 测试源实例和目标实例的连通性。
   
5. 在设置迁移选项及选择迁移对象页面，设置迁移选项和迁移对象（可选择部分库表）。

   配置项	说明
   迁移类型	请根据您的场景选择。 全量迁移：迁移整个数据库，迁移数据仅针对任务发起时，源数据库已有的内容，不包括任务发起后源库实时新增的数据写入。 全量 + 增量迁移：迁移数据包括任务发起时源库的已有内容，也包括任务发起后源库实时新增的数据写入。如果迁移过程中源库有数据写入，需要不停机平滑迁移，请选择此场景。
   迁移对象	整个实例：迁移整个实例，但不包括系统库，如 postgres 中的系统对象，但是会迁移 role 与用户元数据定义。 指定对象：迁移指定对象。
   指定对象	在源库对象中选择待迁移的对象，然后将其移到已选对象框中。

6. 在校验任务页面，完成迁移前校验工作，单击启动任务。
   如果校验任务不通过，可以参考 校验不通过处理方法 修复问题后重新发起校验任务。

• 失败：表示校验项检查未通过，任务阻断，需要修复问题后重新执行校验任务。
• 警告：表示检验项检查不完全符合要求，可以继续任务，但对业务有一定的影响，用户需要根据提示自行评估是忽略警告项还是修复问题再继续。
  

7. 返回迁移任务列表，待增量同步完成100%，在操作列单击完成，即可完成迁移任务。

• 选择结构迁移或者全量迁移：任务完成后会自动结束，不需要手动结束。
• 选择全量 + 增量迁移：全量迁移完成后会自动进入增量数据同步阶段，增量数据同步不会自动结束，需要您手动单击完成结束增量数据同步。
  • 请选择合适时间手动完成增量数据同步，并完成业务切换。
  • 观察迁移阶段为增量同步，并显示无延迟状态，将源库停写几分钟。
  • 目标与源库数据差距为0MB及目标与源库时间延迟为0秒时，手动完成增量同步。
    

8. （可选）如果您需要进行查看任务、删除任务等操作，请单击对应的任务，在操作列进行操作，详情可参考 任务管理。
9. 当迁移任务状态变为任务成功时，即可对业务进行正式割接，更多详情可参考 割接说明。