И как оно до X-ового сокета дотянется?

А по-моему, большая часть современных 3d по TCP-соединению с X-сервером работать не будет.

Чтобы в debootstrap-овском chroot что-то заработало, надо туда как минимум подмонтировать /proc и /sys.

Некоторые предлагают монтировать в chroot /tmp с -o bind, чтобы туда X-овый сокет попал.