Dica testada no Funtoo.

Para ter um servidor VNC no seu sistema e assim acessá-lo remotamente, instale o x11vnc:

# emerge x11vnc

Defina uma senha:

x11vnc -storepasswd

Depois inicie o serviço com:

x11vnc -auth guess -forever -loop -noxdamage -repeat -rfbauth /home/[usuário]/.vnc/passwd -rfbport 5900 -shared

Poderá acessar o servidor usando um client VNC como o Vinagre ou até mesmo pelo smartphone usando, por exemplo, o VNC Viewer. É isso!

Para mais informações, deixo a fonte:

• VNC/Servers - Community Help Wiki