所有节点进行了版本统一升级:
系统升级至 CentOS Linux release 7.9.2009 (Core) 且所有包更新至今日最新版、其中内核升级至 3.10.0-1160.95.1.el7.x86_64
InfiniBand驱动升级至 4.9-7.1.0 或 5.8-3.0.7
OmniPath驱动升级至 10.12.1.0.7
NVIDIA GPU驱动升级至 470.199.02 或 535.104.12,DCGM升级至 3.2.6-1 ,pyNVML升级至 12.535.108