Конечно, вам нужно прочитать файл, но вы могли бы
ssh -e none USER@REMOTE "cat file" | xclip -i
хотя это все равно означает открыть ssh-соединение и скопировать содержимое файла. Но в итоге вы больше ничего этого не увидите ;)
А если вы подключаетесь с компьютера OS X, то вместо этого используйте pbcopy
:
ssh -e none USER@REMOTE "cat file" | pbcopy