正文
ESXi虚拟化的坑-细微区别下虚拟机性能差异巨大
背景
周末在公司无偿加班.
同组的小伙伴周一有一个需求,
我想着周六乘着机器压力不大进行一下虚拟机的clone
但是截止到晚上快十点都没有完全Clone完.
我感觉非常不对.
然后突然想是不是硬件的bug导致性能有差异.
想着最近总是在进行redis的性能测试, 直接可以拿过来验证一把.
不查不清楚, 一查直接震惊了, ESXi6.7的不同小版本性能差异巨大
机器配置情况
公司里面很多机器都是Inspur NF5280M5的机器
配置基本上都一样 都是2*Intel Golden 5218 2.3Ghz + 1T内存 4THDD*12(Raid6)
为了便于管理大部分都是用ESXi
自从从代理采购之后, 大部分都是代理商给安装好ESXi, 我这边最多调整一下RAID卡的设置
大部分是采用Raid卡的Write back的模式.
获取部分核心信息的方法 CPU的工作频率
esxcli hardware cpu list|grep -i -E 'cpu:|core speed'
查看内存频率
smbiosDump |grep -i speed
Samsung / W0L300001103DC1430 / 2933 MHz /64G *16
看其他机器的信息为:
Samsung / 1464B712 / 3200 MHz /64G *16
一个比较早的机器为:
Ramaxel /07F22101 / 2666 MHz /32G *20
一个简单结论
6.7的版本下 15160138 的build 的GA时的8169922 性能要好很多
怀疑ESXi6.7 发布之后 进行了非常高的性能优化.
虽然内存等效工作频率多了200MHZ(7%不到),但是提升足有 40% 以上
感觉只能通过 虚拟化技术水平的提升才能达到.
另外也切实发现不通操作系统差异巨大,国产系统的测试值都表好一些.
硬件平台不能单纯看CPU核数内存大小
还要查看 CPU频率, 型号, 内存工作频率, 内存厂商等等.
性能的变量很多, 稍有不慎,可能就差异巨大.
相同型号的CPU,在不同的虚拟化背景情况下有 67%的性能差距.
测试结果-注意CPU都是Golden 5218 2.3Ghz
ESXi大版本 |
ESXi Build版本号 |
内存工作频率 |
Redis测试数据 |
备注情况 |
6.5 |
4564106 |
2666 |
61200 |
超售比较厉害-CentOS8 |
6.5 |
4564106 |
2666 |
66400 |
超售比较厉害-kylinV10 |
6.5 |
4564106 |
2666 |
90663 |
有超售-CentOS8 |
6.7 |
8169922 |
2999 |
53353 |
几乎没有超售-CentOS9 |
6.7 |
8169922 |
2999 |
71458 |
几乎没有超售-OpenEUler2203 |
6.7 |
8169922 |
2999 |
57265 |
几乎没有超售-CentOS9 |
6.7 |
15160138 |
3200 |
95067 |
几乎没有超售-CentOS7 |
6.7 |
15160138 |
3200 |
94881 |
几乎没有超售-OpenEUler2203 |
6.7 |
15160138 |
3200 |
102769 |
几乎没有超售-OpenEUler2203 |