Попробуйте предложения по прямым соединениям и избегайте зашифрованных протоколов, таких как ssh. Затем, если вы все еще хотите получить каждый бит производительности, дайте этому сайту почитать: https://fasterdata.es.net/host-tuning/linux/ за советом по оптимизации ваших TCP окон.