通过 Kafka 数据订阅跨账号同步日志
简介
在一些场景中，我们可能需要将日志在不同账号的日志主题之间进行迁移与同步。本文将介绍如何通过 Kafka 数据订阅功能实现将账号 A 的 a 日志主题中的日志同步至账号 B 的 b 日志主题。
操作步骤
1. 登录 CLS 控制台，在日志主题管理页中，找到需要被迁移或同步的 a 日志主题，单击 a 日志主题的名称进入日志主题详情页。
2. 在日志主题详情页中，选择 Kafka 协议消费页签，如下图所示：
3. 将 Kafka 协议消费当前状态开启。
4. 按照下图配置 Kafka 协议消费。
5. 完成配置后，单击确定后，您会看到该日志主题作为 Kafka 消费端的 Kafka Topic ID，Kafka 服务域名。将 Kafka Topic ID 与 Kafka 服务域名记录下来。
注意：
若 a 日志主题与 b 日志主题地域不同，请记录外网域名； 若地域相同，建议记录内网域名。
6. 查看 a 日志主题所在的日志集，并记录下日志集 ID。
7. 前往 API 密钥管理，查看 A 账号的密钥 ID 与密钥 KEY，并记录下来。
8. 登录 B 账号，找到需要迁移或同步的 b 日志主题，单击 b 日志主题的名称进入日志主题详情页。
9. 在日志主题详情页中，选择采集配置，单击 Kafka 数据订阅配置右侧的新增，如下图所示：
10. 在集群配置步骤，进行如下配置：
kafka类型：自建 Kafka
服务地址：a 日志主题消费端的 Kafka 服务域名。若 a 日志主题与 b 日志主题不同地域，请使用外网域名；若地域相同，建议使用内网域名。
协议类型：sasl_plaintext
认证机制：PLAIN
用户名：a 日志主题的日志集 ID
密码：A 账号密钥 ID#A 账号密钥 KEY
Kafka Topic 列表：a 日志主题消费端的 Kafka Topic ID
消费组：为空
起始位置：最晚
11. 完成集群配置后，可单击预览查看是否成功消费到 a 日志主题的日志。
12. 单击下一步，按需配置订阅规则，索引配置。详情可参见 配置 Kafka 数据订阅任务。
文档反馈