В дополнение к файлу .Xauthority, упомянутому в другом ответе, ваш chroot также должен иметь сокет X. ssh -X
не передает X через абстрактный сокет, только через сокет UNIX с путем. Если ваш chroot не имеет /tmp/.X11-unix
bind-mounted в нем, программы в вашем chroot не смогут подключиться к X-серверу.