tencent cloud

消息队列 RocketMQ 版

动态与公告
新功能发布记录
公告
产品简介
产品概述
什么是消息队列 RocketMQ 版
产品优势
应用场景
产品系列
开源对比
高可用
使用限制
开服地域
基本概念
产品计费
计费概述
价格说明
计费示例
切换集群计费模式(5.x)
续费说明
查看消费明细
退费说明
欠费说明
快速入门
快速入门概述
准备工作
步骤1:创建 RocketMQ 资源
步骤2:使用 SDK 收发消息(推荐)
步骤2:运行 RocketMQ 客户端(可选)
步骤3:查询消息
步骤4:销毁资源
用户指南
使用流程指引
配置账号权限
新建集群
命名空间管理
配置 Topic
配置 Group
连接集群
管理消息
管理集群
查看监控和配置告警
跨集群复制消息
实践教程
RocketMQ 常见概念命名规范
RocketMQ 客户端实践
RocketMQ 性能压测和容量评估
使用社区版 HTTP SDK 接入
客户端风险说明和更新指南
关于 RocketMQ 4.x 集群角色(Role)相关云 API 迁移指引
迁移指南
有感迁移
无感迁移
开发指南
消息类型
消息过滤
消息重试
POP 消费模式(5.x)
集群消费与广播消费
订阅关系一致性
限流
API 参考(5.x)
History
API Category
Making API Requests
Topic APIs
Consumer Group APIs
Message APIs
Role Authentication APIs
Hitless Migration APIs
Cloud Migration APIs
Cluster APIs
Data Types
Error Codes
API 参考(4.x)
SDK 参考
SDK 概述
5.x SDK
4.x SDK
安全与合规
权限管理
云 API 审计
删除保护
常见问题
4.x 实例常见问题
服务协议
服务等级协议
联系我们

从自建集群迁移元数据

PDF
聚焦模式
字号
最后更新时间: 2026-01-23 17:02:15

操作场景

客户在使用 TDMQ RocketMQ 版时,通常会面临着存量业务的切换,例如从自建的 RocketMQ 或者其他平台的托管版 RocketMQ 迁移到 TDMQ-RocketMQ 版上。
该任务指导您将自建的开源 RocketMQ 集群的元数据迁移至腾讯云消息队列 RocketMQ 版。
说明:
专享集群和虚拟集群均支持元数据迁移,且迁移步骤相同。

前提条件

已提前在控制台中创建好云上 集群命名空间

操作步骤

步骤1:导出元数据文件

如您使用的是自建的开源版 RocketMQ,我们提供了三种方法帮助您导出元数据。

方法1:在线使用脚本导出

如您的环境可以访问公网,直接在您的服务器运行如下脚本(如果您的 RocketMQ 集群包含多台机器,在保证集群内网络互通的情况下,在任意机器运行即可)。
/bin/bash -c "$(curl -fsSL https://rocketmq-1306598660.cos.ap-guangzhou.myqcloud.com/rocketmq-export.sh)"

方法2:通过本地执行脚本

如您的网络环境没有公网访问权限,
1. 下载 迁移上云工具 到本地。
2. 将下载好的工具上传至您自建的 RocketMQ 集群(如果您的 RocketMQ 集群包含多台机器,在保证集群内机器间网络互通的情况下,在任意机器运行即可)。
3. 解压并进入到工具的目录。
unzip rocketmq-migration.zip
cd rocketmq-migration
4. 执行如下命令进行迁移。
// 执行这个命令,主要是为了使用导出工具的文件作为执行文件
ROCKETMQ_HOME=`pwd`
//开始执行导出
./bin/export.sh
// 输入需要导出的开源Rocketmq的地址,如localhost:9876
Enter name server address list:localhost:9876
// 选择输入一个需要导出的集群名称,如DefaultCluster
Choose a cluster to export:DefaultCluster
// 输入元数据导出的目录,默认最终的元数据存放于/tmp/rocketmq/config/rocketmq-metadata-export.json
Enter file path to export [default /tmp/rocketmq/export]:

方法3:通过 .xlsx 文件导出/导入

如您的元数据来源于另外一个腾讯云 RocketMQ 集群,您可以直接通过上传 .xlsx 模板的方式上传 Topic 和 Group 数据。
通过 Topic/Group 列表页右上角的

按钮直接导出元数据,元数据的导出格式为 .xlsx 格式的表格文件。之后前往新集群的 Topic/Group 列表页右上角的

按钮,将数据导入到指定的4.x 集群的命名空间 或 5.x 集群下。
对于新建的集群,您也可以将数据按照上述的元数据模板 .xlsx 的格式将元数据在表格内编辑后进行上传。您可以在迁移上云 > 元数据迁移页面右侧说明获取模板。获取模板时通过选择不同类型的目标集群来区分 4.x 集群 和 5.x 集群的元数据模板。


步骤2:创建迁移任务

1. 登录 TDMQ RocketMQ 控制台,进入 迁移上云 页面。进入到迁移任务列表页。单击新建任务创建对应的迁移任务。

2. 选择迁移任务类型:
集群迁移:将原先自建集群的元数据迁移到已创建的集群中来,在进行“集群迁移”任务时,迁移工具默认会将开源 RocketMQ Dashboard 中 topic 名称内“%”前的部分解析为命名空间的名称,以此来为您创建多个互相逻辑隔离的命名空间。如原先自建集群中没有区分命名空间,则系统会默认为您生成一个名为 default 的命名空间(仅适用于 4.x 专享集群和存量 4.x 虚拟集群)。
导入至指定的命名空间:仅 4.x 专享集群和存量 4.x 虚拟集群支持。将原先自建集群的元数据迁移到指定的命名空间内。如原先的 topic 没有区分命名空间或者进行业务分类,可以借助迁移上云的机会,在接下来导入的过程中,选择特定的 topic 和 group,指定它们进入不同的命名空间以区分业务或者环境。

说明:
5.x 集群和 4.x 通用集群支持导入角色和 ACL 信息。
5.x 集群和 4.x 通用集群没有命名空间,因此只支持导入到集群,没有 “导入到命名空间” 的选项。
3. 根据图示,上传在第一步中获取的元数据文件,选择需要导入的 topic 和 group。
注意:
单个任务只能导入最多 1000 条 topic 和1000条 group 数据,多余的数据将出现导入失败的情况。


步骤3:查看任务状态

任务创建成功后,进入任务列表查看任务进度。如果数据过多时,任务需要加载一段时间。单击查看详情可以查看任务具体的运行状态。

如果任务出现 “部分失败” 或者 “全部失败” 的场景,可以通过筛选查看失败的任务原因。



帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈