tencent cloud

弹性 MapReduce

Kudu 节点缩容数据搬迁指南

PDF
聚焦模式
字号
最后更新时间: 2025-01-03 15:02:25
本文档主要对 Kudu 集群类型 Core 节点 tserver 缩容时,需进行的数据搬迁进行介绍。
说明
Kudu 集群类型支持 Core 节点缩容,该功能未默认开放,如有需要请您 提交工单 申请开通。
在进行 tserver 节点下线前,可以使用 rebalance tool 做数据迁移。请注意,一次只能下线一台 tserver,如果下线多台,需重复执行下述步骤。

Kudu 基于 rebalance tool 迁移

1. 确保集群状态 ok。
/usr/local/service/kudu/bin/kudu cluster ksck 10.0.1.29:7051,10.0.1.16:7051,10.0.1.36:7051

2. 使用步骤1的 ksck 命令,获取下线的节点 uid。

以 fb9afb1b2989456cac5800bf6990dfea 节点为例子。 3. 将 fb9afb1b2989456cac5800bf6990dfea 节点进入维护模式。
/usr/local/service/kudu/bin/kudu tserver state enter_maintenance 10.0.1.29:7051,10.0.1.16:7051,10.0.1.36:7051 fb9afb1b2989456cac5800bf6990dfea
4. 执行 rebalance 命令
/usr/local/service/kudu/bin/kudu cluster rebalance 10.0.1.29:7051,10.0.1.16:7051,10.0.1.36:7051 --ignored_tservers fb9afb1b2989456cac5800bf6990dfea --move_replicas_from_ignored_tservers
等待命令执行结束,再次用 ksck 检查,状态为 ok,继续后面步骤。 5. 暂停 fb9afb1b2989456cac5800bf6990dfea 对应节点10.0.1.45的 tserver 进程。注意此时,使用ksck命令,集群状态不健康,需要重启 tmaster。

6. 在 EMR 控制台 重启 master。注意需要手动一台一台的重启(不建议使用控制台的滚动重启)。重启结束后,使用ksck命令,确保集群状态健康。


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈