tencent cloud

文档反馈

挂载 CHDFS

最后更新时间:2023-12-27 10:02:56

    操作场景

    CHDFS 是标准 HDFS 访问协议和分层命名空间的高性能分布式文件系统,EMR 支持读写 CHDFS 上的数据,本文主要介绍了如何将 CHDFS 挂载到 EMR 集群。

    操作步骤

    场景一:新集群挂载 CHDFS

    说明
    新集群:2019年12月31日当日及之后创建的集群,EMR 默认 CHDFS 挂载地址为 /data/emr/hdfs/tmp/chdfs
    EMR 集群已自动适配 CHDFS,创建 CHDFS 并合理设置权限,使 CHDFS 与 EMR 集群网络互通,配置步骤如下:
    1. 创建与 EMR 集群同地域的 CHDFS,可参考 创建 CHDFS
    2. 按需创建权限组,可参考 创建权限组
    3. 按需创建权限规则,可参考 创建权限规则
    4. 创建与 EMR 集群同网络下的挂载点,可参考 创建挂载点
    5. 检查 CHDFS 与 EMR 集群连通性,使用 hadoop fs 命令行工具,运行 hadoop fs –ls ofs://${mountpoint}/ 命令,这里 mountpoint 为挂载地址。若文件列表可正常列出,则表示已成功挂在 CHDFS。

    场景二:存量集群挂载 CHDFS

    说明
    存量集群:2019年12月31日前已创建的集群。
    存量 EMR 集群挂载 CHDFS,可参考 挂载 CHDFS
    联系我们

    联系我们,为您的业务提供专属服务。

    技术支持

    如果你想寻求进一步的帮助,通过工单与我们进行联络。我们提供7x24的工单服务。

    7x24 电话支持