vmware lun回收引起的IO问题

devtools/2024/12/23 1:13:24/

起初并没人关注的小问题,正常不过的虚机存储迁移操作,引起的延迟却引发一连串的变化。
环境
vsphere 6.7 + 华为集中式存储
开始

  • 下午5:17
    业务反馈,存在数据超时,频繁在1秒钟以内,正常在200ms。需运维排查虚机的状态与IO情况等硬件使用情况。
  • 下午5:30
    随手翻开zabbix 打开cpu idel 与avaliable memory ,均正常余量蛮大,这台为数据库cpu idel 最高不超过30%,排除cpu 内存问题。
    同时数据库组同事给予意见:
    从awr分析上看瞬时的io大,写入慢了假设后续硬件层面没法提高的情况下,建议对相关表改成分区表,再把数据库的几个数据文件分割到多个新挂载磁盘卷去。如果存储能提升来的会快一点。
    以上在下班前算是给予一个比较好的解决方式,恰逢周五下班,无心排查期待后续没有其余问题。
  • 晚上 21:47
    业务反馈延迟在这几个小时内反反复复发生,告警一直反反复复。
    此刻开始关注,调出vsphere 打开虚机IO延迟,查看在这段时间内IO正常,最大演出151。怀疑这个存储不行,立马决定热更换存储。
  • 晚上 21:58
    怀疑不是存储的问题,立马停止存储迁移。打开存储管理台查看当前lun的状态。并收集存储日志交给厂商进行定量分析。
  • 晚上 23:30
    经过仔细排查与操作记录回想,基本确认是在4:30-5:17进行的虚机整机迁移(包含存储的更换)导致的延迟增加。
    1:分析存储性能数据,从16:35开始存储上ID为17的LUN

http://www.ppmy.cn/devtools/58159.html

相关文章

[解决] chrome/edge浏览器打开F12开发者模式,点击应用标签崩溃

2024/6/11 晴 前一天都是好的,突然就出现题目的问题了,尝试了各种方法 清理浏览器缓存隐私模式使用chorome, 使用edge使用win11沙盒里面的edge 搞得人很崩溃,恰好又遇到其他组件需要调试,一直没定位到问题. 直到今天 2024/6/20 终于解决了. 缩小了范围后,发现居然是网站的 m…

面向 Rust 新手的 Cargo 教程:轻松上手

面向 Rust 新手的 Cargo 教程:轻松上手 引言Cargo 简介定义与重要性与传统构建工具的对比 安装与配置 Cargo在不同操作系统上安装 Rust 和 CargoWindowsmacOSLinux 配置 Cargo 环境变量与路径第一个 Cargo 项目 主要功能概述结语 引言 在编程语言的浩瀚宇宙中&…

04-ArcGIS For JavaScript的可视域分析功能

文章目录 综述代码实现代码解析结果 综述 在数字孪生或者实景三维的项目中,视频融合和可视域分析,一直都是热点问题。Cesium中,支持对阴影的后处理操作,通过重新编写GLSL代码就能实现视域和视频融合的功能。ArcGIS之前支持的可视…

使用Python实现深度学习模型:分布式训练与模型并行化

引言 随着深度学习模型的复杂度和数据量的增加,单一设备的计算能力往往无法满足训练需求。分布式训练和模型并行化技术可以有效地加速模型训练过程,提高计算效率。本文将介绍如何使用Python实现深度学习模型的分布式训练与模型并行化。 所需工具 Python 3.xTensorFlow 或 P…

在Linux/Debian/Ubuntu中出现“Could not get lock /var/lib/dpkg/lock-frontend”问题的解决办法

在Linux/Debian/Ubuntu中出现“Could not get lock /var/lib/dpkg/lock-frontend”问题的解决办法 在使用 apt 或 apt-get 进行软件包管理时,有时会遇到以下错误提示: Could not get lock /var/lib/dpkg/lock-frontend - open (11: Resource temporari…

Python 中,NumPy 的数组操作

应用场景: 数据分析和预处理:对大量的数据进行清洗、筛选、转换等操作,例如去除异常值、标准化数据等。 图像和信号处理:处理图像的像素值、音频或视频的信号数据。 机器学习和深度学习:对特征数据进行操作&#xff0c…

Nginx 高效加速策略:动静分离与缓存详解

在现代Web开发中,网站性能是衡量用户体验的关键指标之一。Nginx,以其出色的性能和灵活性,成为众多网站架构中不可或缺的一部分。本文将深度解析如何利用Nginx实现动静分离与缓存,从而大幅提升网站加载速度和响应效率。 理解动静分…

idea如何连接gitee仓库

1.先在idea上登录gitee账号 在gitee官网上生成令牌。 点击生成新令牌。 复制到idea上就行了。然后登陆成功。 2.连接gitee 把项目的https克隆到idea中就行了。