HQY 一个和谐有爱的空间

背景NVIDIA ConnectX-7 是一款高性能的网卡，支持 InfiniBand 和 Ethernet 协议，速度可达 400Gb/s。以其高吞吐量和低延迟广泛应用在HPC与AI场景，比如和GPU H100，B200等。NODE之间的GPU在机间通信通过ConnectX使用RDMA进行通信，NODE内机内GPU通信使用带宽更高的NVLINK通信。核心关键点400GbpsPCIe 5.0，最大lane: x32 (5.0的lane速 32GT/s * 16 = 512T/s，所以支持的是40

DPU和CPU互联的接口之争：Virtio还是SR-IOV？编者按：DPU和CPU通过PCIe高速连接，基于PCIe构建DPU和CPU之间的软硬件接口，如Virtio、NVMe、AWS的ENA/EFA等，以及各厂家自定义的基于SR-IOV接口。接口的性能、标准化和扩展性是整个系统成功的关键。本文是NVIDIA关于此接口的白皮书，代表了NVIDIA的观点（不代表作者认同此观点），详细介绍了关于NVIDIA原生SR-IOV和标准Virtio在性能等方面的优劣势对比。“软硬件融合”公众号持续学习和探讨

NVIDIA ConnectX-5 或 ConnectX-6 适配器在ESXI8.0上SR-IOV实践文章目录前言一、概述二、先决条件安装MFT工具1.BIOS中启用SR-IOV2.安装NVIDIA固件工具（MFT）三. 固件中启用SR-IOV四.创建虚拟机并分配SR-IOV前言客户要求虚拟机网络具有高性能，于是采用以下方案服务器方面我们使用Mellanox ConnectX-5 DX 双端口 100Gbe QSFP56 网络适配，为虚拟机提供硬件支撑。软件方面我们使用VMware vSpher

修改VirtualBox虚拟硬盘VMDK大小原因原来设定的VirtualBox虚拟机硬盘是vmdk格式，动态分配大小但最大大小仅为60G。由于使用上的需求，希望将最大大小扩大到100G。使用VirtualBox（版本6.1）上的虚拟介质管理器进行大小调整。但报如下错误：错误原因：VirtualBox不支持vmdk格式的虚拟硬盘大小调整。解决方案先将vmdk虚拟硬盘转换为vdi格式，再进行resize大小调整，最后将vdi格式转换回vmdk。可通过cmd调用VBoxManage实现：使用Windo

VirualBox的虚拟磁盘后期扩容方法-亲测可行windows/mac/ubuntu通用VirualBox装好系统后，只能改内存大小，虚拟硬盘是无法通过GUI软件界面直接更改大小的。唯一的办法是通过vboxmanage命令（windows系统去virualBox有安装目录下找，mac/ubuntu系统可直接用） 关键点：检查虚拟硬盘的明细，是否是动态硬盘方法一、如果是动态硬盘，那恭喜你，只要一行命令就搞定了如我要把一个硬盘改为60G，打开mac终端输入以下命令（--resize 单位

VirtualBox扩容失败-Progress state: VBOX_E_NOT_SUPPORTED Resizing to new size 16231956480 is not yet使用VirtualBox时，发现一个分区大小不够用，使用resize扩容，提示失败。D:\VirtualBox>VBoxManage modifyhd "D:\vx\docker1\docker1.vdi" --resize 154800%...Progress state: VBO

VirtualBox 虚拟硬盘不能扩大（出错：VBOX_E_NOT_SUPPORTED）的解决办法$ vboxmanage modifyhd "/home/wenxue/VirtualBox VMs/WIN7X64VB/WIN7X64VB.vdi" --resize 1200000%...VBOX_E_NOT_SUPPORTEDVBoxManage: error: Failed to resize mediumVBoxManage: error: Resizing

前言最近把之前的N5105工程机闲鱼出掉了，就为了准备一台设备，可以更多的PCIE槽可以插显卡做显卡直通解码用，也可以插万兆网卡做万兆内网。因此，特地重新配了一台电脑，买了Intel X710-DA4的网卡，再把之前淘汰下来的GTX1060显卡插上。为什么选择台式机，而不是服务器？服务器吵啊！个人理解，好比家装和工装的区别，台式机就是家装，各个设备都比较好点，尤其是风扇明显声音小得多，服务器图一个便宜，扩展性能会更强一点，但是台式机主板能满足我的个人需求就行了。关于直通对于ESXI8.0来说，直

VMware ESXi DirectPath I/O 直通GPU卡给虚拟机使用在虚拟机中使用 GPU 主要有三种设置：DirectPath I/O、NVIDIA vGPU、vSphere Bitfusion，几个月前，已经介绍了NVIDIA vGPU部署步骤，参考：VMware ESXi安装NVIDIA GPU显卡硬件驱动和配置有些时候，虚拟机需要独享GPU资源，那么就需要用到DirectPath I/O (直通)，ESXi hypervisor 把 GPU 设备直接映射成虚机中的 GPU 设备

      我常常见到我的客户使用虚拟机的CPU和内存的热添加功能，这确实是个了不起的功能，在不关虚拟机的情况下，就可以马上为虚拟机增加CPU资源，谁不喜欢呢？为什么VMware不把这个功能做出默认的选项？因为这样做有个很大的弊端。        参考下面两个知识库内容：https://knowledge.broadcom.com/external/article?legacyId=2040375https://knowled

软件：Esxi6.7u2QUADRO DESKTOP/QUADRO NOTEBOOK DRIVER RELEASE 452.57Windows 10 1803Passthrough 一个quadro卡 给vm使用在VMware esxi 平台或者citrix XEN 平台，是很多用户的应用场景，并且这也是官方支持的部署方式。VM 可以用这个卡进行图形渲染工作或者科学计算，但是很多客户会遇到以下问题。1.      V

         制作合格的虚拟机模板是管理员最重要的工作之一，如果虚拟模板存在问题，将导致由此模板部署的虚拟机会普遍存在问题，由于这种成倍的放大效应，非常值得花时间去把这件事做好，下面我以最新的windows server 2022 ，在esxi 8.0.3 安装来演示。创建虚拟机        首先需要考虑的是兼容性，也叫硬件版本，如果你的部署环境中还有更低的版本

        随着SSD的价格下降，业务对延迟的要求越来越苛刻，所以SSD在基础架构中的使用越来也多，VMware环境中大家最早接触到SSD可能就是vSAN环境，之前我已经发表了如何查询SSD寿命的方法，分别针对SCSI（SATA可以看成是SCSI的消费级别版本）协议和NVME协议：《通过esxicli了解SSD寿命》《通过esxicli了解SSD寿命之二》        还

     有些时候我们对esxi升级以后，出现了问题，想回退，这时并不需要重新安装就版本，只需要开机的在服务器的控制台上，快速按下Shift + R，注意最好先把键盘的大写打开，然后esxi刚刚开始启动的时候就按下，这个时间窗口很短。        例如我将esxi 8.0.2升级到最新的8.0.3，如果我想回退，就可以采用这个办法，如果启动时按键成功，就可以看到下面这个界面： 

      由于规划不合理，国内的虚拟化环境中，往往最早不够用的资源就是内存，保持CPU，内存和存储合理的比例，在设计中至关重要        本篇说的方法，还处于“Tech Prview”阶段，就是还需要验证，不适合于重要的生产环境，可以在一些不重要的生产环境，测试环境中使用；需要将esxi升级到最新的8.0.3版本，使用NVMe来模拟内存，官方的术语叫做“Memory Tiering

        由于vSAN的高性价比，采用的用户越来越多，我接触的客户，感觉是超过了一半都使用了vSAN，但是很多客户对一些基本的概念没有理解清楚，特别在发生故障的时候，可能会导致错误的操作，造成不可挽回的结果；希望通过本文帮助大家理解vSAN如何应对故障； 每个版本的vSAN故障场景应对都稍微不同，我这里主要针对目前主流的6.7，7.0，8.0三个版本，做个比较笼统的解释。        vSAN是个目标存储，从

     在vSAN 7.0 U3之前，要关闭一个vSAN集群，特别是vCenter也运行在其中的那种，虽然这种场景不多的，是比较麻烦的，具体的步骤可以参考：https://knowledge.broadcom.com/external/article/327033/shutting-down-and-powering-on-a-vsan-clu.html        你需要手工关闭所有应用，然后关闭DRS和与之相关的vCL

过虚拟化是普遍的需求，最近接触到一些中小企业，见到VMware的普遍部署，但VMware的部署实在太原始，多是单机方式部署，技术人员很少有合规的虚拟化技术，所以可以出现VMFS券损坏的这类的严重故障，以至于客户想退回到物理机的原始状态；这些中小企业往往有3-5个重要业务，加上其他不重要的系统，一般也就20个虚拟机以内，虽然这些业务不像银行那样要求的可用性，但中国在数字化转型方面是走在了世界前列，特别在日常消费领域，通过移动端APP和客户关联，使得这些系统必须具备高可用，否则在业务端就会造成损失，

        现在的SSD价格越来越亲民，特别是我们的长江存储也可以量产NAND 存储芯片，在市场上站稳脚跟，而且芯片行业的成本往往遵从指数曲线，所以可以预见未来SSD的性价比会越来越好；另外一个维度就是用户体验上，人们对延迟越来越没有耐心，所以也迫使服务商必须采用延迟更低的SSD作为存储。        VMware可以说比较早就押注SSD，在vSAN 6.X,7.X的版本中就已经支

一个Horizon系统，结果无法增加新的桌面了，经过进一步了解，根本问题就是在vCenter中，将资源池作为虚拟机目录使用，由于某个原因关闭DRS后，所建立的资源池也被删除，而桌面部署中选择了资源池来部署，所以增加桌面的操作就会失败，这位朋友的环境中，应该有上百台虚拟机，其也没有备份过vCenter，所以要恢复其资源池结构很不容，还好，最后其有用RVTOOL导出过配置，我查了下，在RVTOOLS导出的表格中，确实有一栏是资源池的数据，所以他可以按这个数据，将其资源池的结构，和每个虚拟机所属的资源