После отключения ssh host key verification - все же заработали.
Но, похоже, что не совсем стабильно, но заработали.
Я оставил везде IP на статике. Так что свитч раздает, то так и стоит по умолчанию.
Тем более, что если на свитче включить DHCP сервер, то к нему доступ отваливается.
В общем я вас...