Все разрешилось!
Под Датасторы у меня отдельная физическая сеть с возможностью пропуска mtu = 9000
В VMkernel для iSCSI тоже ставил mtu = 9000 и сами Датасторы настраивал mtu = 9000.
Сделал следующее: сеть оставил mtu = 9000, а VMkernel и Датасторы настроил mtu = 4500.
Все заработало на УРА.
По сути транспорт может передавать "вагоны" по 9 кГ, а отправляем по 4,5 кГ есть запас. Можно поиграться и определить максимально возможный вес "вагона"
Спасибо всем. Павел