k8s+rancher配置滚动发布更新时服务不可用

server/2024/12/18 7:11:12/

问题

配置完了k8s优雅下线后,发现配置了滚动发布后,两个服务同时在running状态,其中旧服务开始下线会导致有三四秒的时间调用该服务的接口会负载均衡到该服务,接口调用就会报错服务异常。

经排查,具体原因是服务虽然会到终止状态,但是nacos上有缓存,导致会调用到旧服务。

滚动发布配置:
请添加图片描述

负载到已下线pod效果:
请添加图片描述

依赖

需要健康检查和prometheus的支持

        <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-actuator</artifactId></dependency><dependency><groupId>io.micrometer</groupId><artifactId>micrometer-registry-prometheus</artifactId><scope>runtime</scope></dependency>

bootstrap.yaml

加入 actuator 独立的端口配置,避免通过gateway能直接访问

# 优雅下线配置
management:server:port: 9081endpoints:web:exposure:include: '*' #对外公开 health,info,shutdown 端点,默认只会公开前两个

bootstrap-xx.yaml

对应环境的配置文件也需要单独配置,全都配置到bootstrap会失效。暴露对应端点才能使后面k8s配置检查成功

management:endpoints:web:exposure:include: 'refresh,info,health,logfile,loggers,heapdump,threaddump,metrics,prometheus,mappings,env' #暴露所有端点base-path: /actuator

对应服务需要添加下线端点 NacosDeRegistryEndpoint

优化是可以做到公司的common包里,就不必每个服务都重复引入一遍。

java">import com.alibaba.cloud.nacos.NacosDiscoveryProperties;
import com.alibaba.cloud.nacos.registry.NacosRegistration;
import com.alibaba.cloud.nacos.registry.NacosServiceRegistry;
import lombok.extern.slf4j.Slf4j;
import org.springframework.boot.actuate.endpoint.annotation.Endpoint;
import org.springframework.boot.actuate.endpoint.annotation.WriteOperation;
import org.springframework.stereotype.Component;@Slf4j
@Component
@Endpoint(id = "nacos-deregister")
public class NacosDeRegistryEndpoint {private final NacosRegistration nacosRegistration;private final NacosServiceRegistry nacosServiceRegistry;private final NacosDiscoveryProperties nacosDiscoveryProperties;public NacosDeRegistryEndpoint(NacosRegistration nacosRegistration, NacosServiceRegistry nacosServiceRegistry, NacosDiscoveryProperties nacosDiscoveryProperties) {this.nacosRegistration = nacosRegistration;this.nacosServiceRegistry = nacosServiceRegistry;this.nacosDiscoveryProperties = nacosDiscoveryProperties;}/*** 从 nacos 中主动下线,用于 k8s 滚动更新时,提前下线分流流量*/@WriteOperationpublic String endpoint() {String serviceName = nacosDiscoveryProperties.getService();String groupName = nacosDiscoveryProperties.getGroup();String clusterName = nacosDiscoveryProperties.getClusterName();String ip = nacosDiscoveryProperties.getIp();int port = nacosDiscoveryProperties.getPort();log.info("deregister from nacos, serviceName:{}, groupName:{}, clusterName:{}, ip:{}, port:{}", serviceName, groupName, clusterName, ip, port);// 设置服务下线nacosServiceRegistry.setStatus(nacosRegistration, "DOWN");return "success";}
}

rancher修改服务配置

主要是设置一个停止服务前的钩子,钩子会执行设置好的命令。这条命令是用配置好的端口9081,以及添加的服务端点 nacos-deregister,做到调用nacos下线接口的操作,避免缓存问题能被负载到。

请添加图片描述

/bin/sh -c 'curl -X POST 'http://127.0.0.1:9081/actuator/nacos-deregister' && sleep 40'

可视化改容易出问题,也可以通过yaml改:

          preStop:exec:command:- /bin/sh- -c- curl -X POST 'http://127.0.0.1:9081/actuator/nacos-deregister' &&sleep 40

最终效果是
请添加图片描述


http://www.ppmy.cn/server/151113.html

相关文章

STM32内部flash分区

STM32的内部Flash根据型号和容量的不同&#xff0c;分区方式可能有所差异&#xff0c;但通常都包含以下几个主要部分&#xff1a; 主存储器&#xff1a;这是内部Flash的主要部分&#xff0c;用于存放程序代码和数据常量。在STM32F4系列中&#xff0c;主存储器被划分为多个扇区…

shell脚本目录下所有文件中关键词替换方法

#!/bin/bash# 定义当前文件夹路径 FOLDER_PATH"." # 当前目录# 旧关键词和新关键词 OLD_KEYWORD"track_wpa_report" NEW_KEYWORD"//track_wpa_report"# 遍历当前目录下的所有文件&#xff0c;并替换关键词 # 使用#作为分隔符&#xff0c;避免斜…

Windos中解决redis-server.exe闪退问题

一、闪退原因 &#xff08;一&#xff09;数据状态异常 数据不一致 在 Redis 运行过程中&#xff0c;如果发生意外情况&#xff0c;如突然断电、系统崩溃或者不正确的操作&#xff0c;可能会导致数据在内存中的存储状态不一致。例如&#xff0c;Redis 使用多种数据结构&#x…

数据结构—图

目录 一、图的定义 二、图的基本概念和术语 2.1有向图 2.2无向图 2.3简单图 2.4多重图 2.5完全图 2.6子图 2.7连通、连通图和连通分量 2.8强连通图、强联通分量 2.9生成树&#xff0c;生成森林 2.10顶点的度、入度和出度 2.11边的权和网 2.12稠密图、稀疏图 2.1…

【Ubuntu】截图软件flameshort

sudo apt install flameshort 安装Flameshot截图工具 配置快捷键 进入系统设置settings&#xff0c;找到Keyboard下的Keyboard Shortcuts快捷键设置面板&#xff0c;按步骤进行设置。

在线预约陪诊小程序

一、前言 随着社会老龄化加剧以及人们健康意识的提高&#xff0c;就医过程中的陪伴需求日益增长。许多患者在面对复杂的医院环境、繁琐的就医流程时&#xff0c;需要有人协助挂号、候诊、取药等&#xff0c;而家属可能因工作繁忙无法全程陪同。同时&#xff0c;异地就医的患者更…

Mysql和MariaDB什么关系

MySQL和MariaDB的关系非常密切&#xff0c;可以用“父子”或者“分支”来形容。简单来说&#xff0c;MariaDB是MySQL的一个分支&#xff0c;由MySQL的创始人之一Michael Widenius&#xff08;也被称为Monty&#xff09;在2009年创建。 以下是它们之间关系的详细说明&#xff1…

【arm】国民N32G435通用定时器霍尔配置,双边沿输入捕获配置

项目场景&#xff1a; 无刷电机FOC控制&#xff0c;配置通用定时器TIM4为霍尔输入检测。 控制平台&#xff0c;国民N32G435CBL7。 问题描述 端口配置&#xff1a; /* Hall port configuration. */GPIO_InitStructure.Pin GPIO_PIN_6 | GPIO_PIN_7 | GPIO_PIN_8…