在 ESXi 虚拟化环境中存储是最容易出现隐性瓶颈的环节90% 以上的虚拟机卡顿、应用响应慢问题都与磁盘 IO 性能相关。很多运维知道用 esxtop 排查性能问题但不清楚按 D 键能获取哪些核心信息导致无法快速定位存储故障。esxtop 按 D 键会进入磁盘设备监控面板核心展示所有物理存储设备的实时吞吐量读写速率和 IO 延迟响应时间是排查存储慢、磁盘卡死、虚拟机 IO 超时的唯一精准工具。本文详细讲解 D 面板的进入方法、核心指标含义、异常判断标准与实战排错流程帮助运维一分钟定位存储性能问题。一、核心结论按 D 键直达磁盘设备性能核心esxtop 是 ESXi 内置的原生性能监控工具所有数据直接来自 VMkernel 内核无任何中间层损耗数据准确性远高于 vCenter 图形化监控。按下 D 键后会切换到物理磁盘设备Disk Device监控面板这是整个 esxtop 中最有价值的面板之一核心展示两类关键指标吞吐量指标每秒读取数据量MBREAD/s、每秒写入数据量MBWRTN/s、每秒 IO 操作数IOPS延迟指标平均 IO 响应时间DAVG/cmd、内核处理延迟KAVG/cmd、设备硬件延迟GAVG/cmd重要区分esxtop 的 D 面板监控的是ESXi 主机层面的物理存储设备HBA 卡、LUN、本地磁盘而不是单个虚拟机的虚拟磁盘。如果需要查看虚拟机的磁盘 IO需要按 V 键进入虚拟机面板。二、基础操作进入与使用磁盘监控面板2.1 快速进入 D 面板SSH 登录 ESXi 主机确保已开启 SSH 服务直接输入esxtop命令启动监控工具按下键盘上的D 键大写小写均可立即切换到磁盘设备监控面板按下Q键可随时退出 esxtop2.2 常用基础操作调整刷新间隔按下S键输入数字单位秒默认 5 秒刷新一次排查瞬时故障可改为 1 秒按指标排序按下大写字母对应的列首字母例如按B键按 MBREAD/s 排序按D键按 DAVG/cmd 排序显示 / 隐藏列按下F键进入列选择界面按对应字母可开启或关闭指定列过滤指定设备按下O键输入过滤条件如NAIDevnaa.6006016055713d00xxxx只显示目标 LUN 设备三、核心指标详解吞吐量与延迟怎么看D 面板的所有指标中只需重点关注以下 8 个核心指标就能完整判断存储设备的运行状态。3.1 吞吐量类指标看存储跑了多少流量吞吐量指标反映存储设备的实际负载数值越高说明存储正在处理的数据量越大。指标名称全称含义正常参考值MBREAD/sMegaBytes Read per Second每秒从磁盘读取的数据量MB/s取决于存储硬件HDD 单盘约 50-100MB/sSSD 单盘约 300-500MB/sMBWRTN/sMegaBytes Written per Second每秒写入磁盘的数据量MB/s同上写入通常比读取慢 10%-30%READS/sReads per Second每秒读 IO 操作数读 IOPSHDD 单盘随机读约 100-200 IOPSSSD 单盘随机读约 10000-50000 IOPSWRITES/sWrites per Second每秒写 IO 操作数写 IOPSHDD 单盘随机写约 50-100 IOPSSSD 单盘随机写约 5000-30000 IOPS异常判断如果吞吐量长期接近存储硬件的理论上限说明存储已经达到性能瓶颈需要扩容或升级存储。3.2 延迟类指标看存储响应快不快延迟指标是判断存储性能好坏的核心比吞吐量更重要。即使吞吐量不高如果延迟过高应用依然会卡顿。指标名称全称含义正常参考值异常阈值DAVG/cmdAverage Latency per Command平均每个 IO 命令的总响应时间毫秒HDD 10msSSD 1ms 20ms 影响体验 50ms 严重卡顿KAVG/cmdKernel Average Latency per CommandESXi 内核处理 IO 的平均延迟 1ms 2ms 说明主机 CPU 或内存不足GAVG/cmdGuest Average Latency per Command存储设备硬件的平均延迟等于 DAVG - KAVG 10ms 说明存储硬件或链路有问题QAVG/cmdQueue Average Latency per CommandIO 在队列中等待的平均延迟 1ms 5ms 说明队列已满IO 请求排队核心逻辑DAVG/cmd 是最关键的指标它直接决定了虚拟机的磁盘体验。如果 DAVG/cmd 持续高于 20ms虚拟机就会出现明显的卡顿高于 50ms 时应用会频繁超时甚至崩溃。四、实战用 D 面板排查常见存储故障4.1 故障 1虚拟机卡顿CPU 使用率低但 % iowait 高排查步骤按 D 键进入磁盘面板查看 DAVG/cmd 指标如果 DAVG/cmd 50ms说明存储延迟过高进一步拆分延迟如果 GAVG/cmd 占比超过 80%说明问题出在存储硬件或链路如果 KAVG/cmd 占比超过 50%说明 ESXi 主机 CPU 或内存不足导致内核处理 IO 变慢解决方法存储硬件问题升级 SSD、增加磁盘数量、优化 RAID 级别链路问题检查光纤交换机、光模块、HBA 卡更换故障部件主机资源问题增加主机 CPU 或内存迁移部分虚拟机到其他主机4.2 故障 2存储吞吐量不高但延迟很高这是最常见的隐性故障表现为 MBREAD/s 和 MBWRTN/s 都很低但 DAVG/cmd 却很高。根本原因随机 IO 过多。机械硬盘的随机 IO 性能极差即使总吞吐量只有 10MB/s如果都是 4KB 的随机小 IO也会导致磁盘队列满延迟飙升。排查验证查看 READS/s 和 WRITES/s如果数值很高但 MBREAD/s 和 MBWRTN/s 很低说明是小 IO 随机读写查看 QAVG/cmd如果队列延迟很高说明 IO 请求在排队等待解决方法将随机 IO 密集型业务如数据库迁移到 SSD 存储开启存储缓存功能优化 IO 合并策略调整虚拟机磁盘的队列深度减少 IO 排队4.3 故障 3某台虚拟机磁盘慢其他虚拟机正常排查步骤按 D 键查看所有 LUN 的延迟如果只有某一个 LUN 延迟高说明问题出在该 LUN按 V 键进入虚拟机面板查看该虚拟机的磁盘 IO 指标如果该虚拟机的 IOPS 或吞吐量很高说明是这台虚拟机占用了过多存储资源解决方法为该虚拟机配置存储 QoS限制其最大 IOPS 和吞吐量将该虚拟机迁移到负载较低的存储 LUN优化虚拟机内的应用减少不必要的磁盘读写五、进阶技巧提升排错效率5.1 导出磁盘性能数据到文件对于需要长期分析的性能问题可以将 esxtop 的磁盘数据导出到 CSV 文件离线分析# 导出100次采样的磁盘性能数据间隔5秒 esxtop -b -n 100 -d 5 disk_performance.csv导出的 CSV 文件可以用 Excel 打开生成性能趋势图直观展示延迟和吞吐量的变化。5.2 只显示指定的 LUN 设备当主机挂载了很多 LUN 时可以通过过滤功能只显示目标 LUN按下O键输入过滤条件NAIDevnaa.6006016055713d00xxxx替换为你的 LUN 的 NAA ID按下回车面板将只显示该 LUN 的性能数据5.3 对比不同存储设备的性能按下B键按 MBREAD/s 排序或按下D键按 DAVG/cmd 排序可以快速找出性能最差的存储设备优先排查。六、常见误区避坑误区vCenter 的存储监控和 esxtop 一样准确纠正vCenter 的监控数据有 1-5 分钟的延迟且是平均值无法捕捉瞬时的性能尖峰。esxtop 是实时内核数据是排查存储故障的唯一标准。误区吞吐量高就说明存储性能好纠正吞吐量只是性能的一个方面延迟才是决定用户体验的关键。很多时候存储吞吐量很低但延迟很高依然会导致应用卡顿。误区DAVG/cmd 正常就说明存储没问题纠正DAVG/cmd 是平均值可能会掩盖瞬时的延迟尖峰。排查时建议将刷新间隔改为 1 秒观察是否有周期性的延迟尖峰。误区本地磁盘比共享存储快纠正如果本地磁盘是机械硬盘而共享存储是全闪存阵列那么共享存储的性能会远高于本地磁盘。不能一概而论要以实际测试数据为准。七、全文总结esxtop 按 D 键进入的磁盘设备监控面板是 ESXi 存储性能排查的核心工具核心展示物理存储设备的实时吞吐量和 IO 延迟。其中 DAVG/cmd 是判断存储性能好坏的最关键指标正常情况下 HDD 应小于 10msSSD 应小于 1ms超过 20ms 就会影响应用体验。日常运维中当遇到虚拟机卡顿、应用响应慢的问题时应首先按 D 键查看磁盘延迟再结合吞吐量、队列深度等指标逐步定位故障根源。掌握 esxtop D 面板的使用方法能够大幅提升存储故障排查效率保障虚拟化环境的稳定运行。
esxtop 按 D 键看什么？磁盘吞吐量与延迟排错完整指南
在 ESXi 虚拟化环境中存储是最容易出现隐性瓶颈的环节90% 以上的虚拟机卡顿、应用响应慢问题都与磁盘 IO 性能相关。很多运维知道用 esxtop 排查性能问题但不清楚按 D 键能获取哪些核心信息导致无法快速定位存储故障。esxtop 按 D 键会进入磁盘设备监控面板核心展示所有物理存储设备的实时吞吐量读写速率和 IO 延迟响应时间是排查存储慢、磁盘卡死、虚拟机 IO 超时的唯一精准工具。本文详细讲解 D 面板的进入方法、核心指标含义、异常判断标准与实战排错流程帮助运维一分钟定位存储性能问题。一、核心结论按 D 键直达磁盘设备性能核心esxtop 是 ESXi 内置的原生性能监控工具所有数据直接来自 VMkernel 内核无任何中间层损耗数据准确性远高于 vCenter 图形化监控。按下 D 键后会切换到物理磁盘设备Disk Device监控面板这是整个 esxtop 中最有价值的面板之一核心展示两类关键指标吞吐量指标每秒读取数据量MBREAD/s、每秒写入数据量MBWRTN/s、每秒 IO 操作数IOPS延迟指标平均 IO 响应时间DAVG/cmd、内核处理延迟KAVG/cmd、设备硬件延迟GAVG/cmd重要区分esxtop 的 D 面板监控的是ESXi 主机层面的物理存储设备HBA 卡、LUN、本地磁盘而不是单个虚拟机的虚拟磁盘。如果需要查看虚拟机的磁盘 IO需要按 V 键进入虚拟机面板。二、基础操作进入与使用磁盘监控面板2.1 快速进入 D 面板SSH 登录 ESXi 主机确保已开启 SSH 服务直接输入esxtop命令启动监控工具按下键盘上的D 键大写小写均可立即切换到磁盘设备监控面板按下Q键可随时退出 esxtop2.2 常用基础操作调整刷新间隔按下S键输入数字单位秒默认 5 秒刷新一次排查瞬时故障可改为 1 秒按指标排序按下大写字母对应的列首字母例如按B键按 MBREAD/s 排序按D键按 DAVG/cmd 排序显示 / 隐藏列按下F键进入列选择界面按对应字母可开启或关闭指定列过滤指定设备按下O键输入过滤条件如NAIDevnaa.6006016055713d00xxxx只显示目标 LUN 设备三、核心指标详解吞吐量与延迟怎么看D 面板的所有指标中只需重点关注以下 8 个核心指标就能完整判断存储设备的运行状态。3.1 吞吐量类指标看存储跑了多少流量吞吐量指标反映存储设备的实际负载数值越高说明存储正在处理的数据量越大。指标名称全称含义正常参考值MBREAD/sMegaBytes Read per Second每秒从磁盘读取的数据量MB/s取决于存储硬件HDD 单盘约 50-100MB/sSSD 单盘约 300-500MB/sMBWRTN/sMegaBytes Written per Second每秒写入磁盘的数据量MB/s同上写入通常比读取慢 10%-30%READS/sReads per Second每秒读 IO 操作数读 IOPSHDD 单盘随机读约 100-200 IOPSSSD 单盘随机读约 10000-50000 IOPSWRITES/sWrites per Second每秒写 IO 操作数写 IOPSHDD 单盘随机写约 50-100 IOPSSSD 单盘随机写约 5000-30000 IOPS异常判断如果吞吐量长期接近存储硬件的理论上限说明存储已经达到性能瓶颈需要扩容或升级存储。3.2 延迟类指标看存储响应快不快延迟指标是判断存储性能好坏的核心比吞吐量更重要。即使吞吐量不高如果延迟过高应用依然会卡顿。指标名称全称含义正常参考值异常阈值DAVG/cmdAverage Latency per Command平均每个 IO 命令的总响应时间毫秒HDD 10msSSD 1ms 20ms 影响体验 50ms 严重卡顿KAVG/cmdKernel Average Latency per CommandESXi 内核处理 IO 的平均延迟 1ms 2ms 说明主机 CPU 或内存不足GAVG/cmdGuest Average Latency per Command存储设备硬件的平均延迟等于 DAVG - KAVG 10ms 说明存储硬件或链路有问题QAVG/cmdQueue Average Latency per CommandIO 在队列中等待的平均延迟 1ms 5ms 说明队列已满IO 请求排队核心逻辑DAVG/cmd 是最关键的指标它直接决定了虚拟机的磁盘体验。如果 DAVG/cmd 持续高于 20ms虚拟机就会出现明显的卡顿高于 50ms 时应用会频繁超时甚至崩溃。四、实战用 D 面板排查常见存储故障4.1 故障 1虚拟机卡顿CPU 使用率低但 % iowait 高排查步骤按 D 键进入磁盘面板查看 DAVG/cmd 指标如果 DAVG/cmd 50ms说明存储延迟过高进一步拆分延迟如果 GAVG/cmd 占比超过 80%说明问题出在存储硬件或链路如果 KAVG/cmd 占比超过 50%说明 ESXi 主机 CPU 或内存不足导致内核处理 IO 变慢解决方法存储硬件问题升级 SSD、增加磁盘数量、优化 RAID 级别链路问题检查光纤交换机、光模块、HBA 卡更换故障部件主机资源问题增加主机 CPU 或内存迁移部分虚拟机到其他主机4.2 故障 2存储吞吐量不高但延迟很高这是最常见的隐性故障表现为 MBREAD/s 和 MBWRTN/s 都很低但 DAVG/cmd 却很高。根本原因随机 IO 过多。机械硬盘的随机 IO 性能极差即使总吞吐量只有 10MB/s如果都是 4KB 的随机小 IO也会导致磁盘队列满延迟飙升。排查验证查看 READS/s 和 WRITES/s如果数值很高但 MBREAD/s 和 MBWRTN/s 很低说明是小 IO 随机读写查看 QAVG/cmd如果队列延迟很高说明 IO 请求在排队等待解决方法将随机 IO 密集型业务如数据库迁移到 SSD 存储开启存储缓存功能优化 IO 合并策略调整虚拟机磁盘的队列深度减少 IO 排队4.3 故障 3某台虚拟机磁盘慢其他虚拟机正常排查步骤按 D 键查看所有 LUN 的延迟如果只有某一个 LUN 延迟高说明问题出在该 LUN按 V 键进入虚拟机面板查看该虚拟机的磁盘 IO 指标如果该虚拟机的 IOPS 或吞吐量很高说明是这台虚拟机占用了过多存储资源解决方法为该虚拟机配置存储 QoS限制其最大 IOPS 和吞吐量将该虚拟机迁移到负载较低的存储 LUN优化虚拟机内的应用减少不必要的磁盘读写五、进阶技巧提升排错效率5.1 导出磁盘性能数据到文件对于需要长期分析的性能问题可以将 esxtop 的磁盘数据导出到 CSV 文件离线分析# 导出100次采样的磁盘性能数据间隔5秒 esxtop -b -n 100 -d 5 disk_performance.csv导出的 CSV 文件可以用 Excel 打开生成性能趋势图直观展示延迟和吞吐量的变化。5.2 只显示指定的 LUN 设备当主机挂载了很多 LUN 时可以通过过滤功能只显示目标 LUN按下O键输入过滤条件NAIDevnaa.6006016055713d00xxxx替换为你的 LUN 的 NAA ID按下回车面板将只显示该 LUN 的性能数据5.3 对比不同存储设备的性能按下B键按 MBREAD/s 排序或按下D键按 DAVG/cmd 排序可以快速找出性能最差的存储设备优先排查。六、常见误区避坑误区vCenter 的存储监控和 esxtop 一样准确纠正vCenter 的监控数据有 1-5 分钟的延迟且是平均值无法捕捉瞬时的性能尖峰。esxtop 是实时内核数据是排查存储故障的唯一标准。误区吞吐量高就说明存储性能好纠正吞吐量只是性能的一个方面延迟才是决定用户体验的关键。很多时候存储吞吐量很低但延迟很高依然会导致应用卡顿。误区DAVG/cmd 正常就说明存储没问题纠正DAVG/cmd 是平均值可能会掩盖瞬时的延迟尖峰。排查时建议将刷新间隔改为 1 秒观察是否有周期性的延迟尖峰。误区本地磁盘比共享存储快纠正如果本地磁盘是机械硬盘而共享存储是全闪存阵列那么共享存储的性能会远高于本地磁盘。不能一概而论要以实际测试数据为准。七、全文总结esxtop 按 D 键进入的磁盘设备监控面板是 ESXi 存储性能排查的核心工具核心展示物理存储设备的实时吞吐量和 IO 延迟。其中 DAVG/cmd 是判断存储性能好坏的最关键指标正常情况下 HDD 应小于 10msSSD 应小于 1ms超过 20ms 就会影响应用体验。日常运维中当遇到虚拟机卡顿、应用响应慢的问题时应首先按 D 键查看磁盘延迟再结合吞吐量、队列深度等指标逐步定位故障根源。掌握 esxtop D 面板的使用方法能够大幅提升存储故障排查效率保障虚拟化环境的稳定运行。
