Между кем и кем вы меряете скорость вы не написали, но причин действительно может быть много, поэтому IMHO и только набор линков, читайте ищите вашу
Troubleshooting network performance issues in a vSphere environment
Troubleshooting ESX/ESXi virtual machine performance issues
В некие стародавние времена начинал я с того что убеждался IRQ сетевушки не шарится с какими то другими устройствами, следующим номером программы проверил бы то что реально творится на интерфейсе свича (show interfaces ...) и с точки зрения ESXi (esxcfg-nics -l)