tencent cloud

容器服务

Documentation容器服务故障处理Nginx Ingress 偶现 Connection Refused

Nginx Ingress 偶现 Connection Refused

PDF
Focus Mode
Font Size
Last updated: 2022-09-26 16:53:55

现象描述

当用户在使用 Nginx Ingress 时，减少 Nginx Ingress Controller 副本过程中，可能出现 Connection Refused 的问题，此时 CLB 批量解绑 RS，TCP/UDP 监听器存量连接停止转发。

可能原因

查看 Nginx Ingress 源码，Nginx Ingress Controller 工作负载没有优雅停机的能力， Pod 在收到 kill signal 之后直接退出。如下图所示：



解决思路

若您使用 TKE Service 优雅停机 的能力，当 Pod 需要被删除时，Pod 能够处理完已接受到的请求，此时入流量关闭，但出流量仍能走通。直到处理完所有已有请求和 Pod 真正删除时，出入流量才进行关闭。待到优雅停机时间结束后，Pod 才被真正的删除。如下图所示：



处理步骤

注意：
仅针对 直连场景 生效，请检查您的集群是否支持直连模式。

步骤1

在 kube-system 命名空间下名为 ****-ingress-nginx-controller 的 Service 里使用 Annotation 标明使用优雅停机。
以下为使用 Annotation 标明使用优雅停机示例，完整 Service Annotation 说明可参见 Service Annotation 说明。
kind: Service
apiVersion: v1
metadata: 
  annotations: 
    service.cloud.tencent.com/direct-access: "true" ## 开启直连 Pod 模式
    service.cloud.tencent.com/enable-grace-shutdown: "true"  # 表示使用优雅停机
  name: my-service
spec: 
  selector: 
    app: MyApp

步骤2

在 kube-system 命名空间下名为 ****-ingress-nginx-controller 的 Deployment 里的 wait-shutdown 前面加一段时间的 sleep。示例如下：
  lifecycle:
          preStop:
            exec:
              command:
              - sleep                        # 添加 sleep 时间
              - 30s                          # 添加 sleep 时间
              - /wait-shutdown      # 在这一行前，添加 sleep 时间
更多内容请参考 Service 优雅停机。如果通过以上步骤仍无法解决您的问题，您可以通过 提交工单 反馈和解决问题。
Previous Topic: Service&Ingress 常见报错和处理Next Topic: CLB Ingress 创建报错排障处理

Help and Support

Was this page helpful?

Help us improve! Rate your documentation experience in 5 mins.

Feedback