Je ne sais pas ce que tu veux faire exactement mais tu peux même faire du serveur X virtuel (xvfb = X virtual frame buffer) et t'y connecter par le moyen qui te plaira (vnc j'imagine). Tu n'auras pas à te soucier de l'utilisation de machine virtuelle puisque tu ne seras limité que par la valeur du display (:0, :1, :2 etc).
# xorg xvfb
Posté par yannig (site web personnel) . En réponse au message Faut-il avoir un serveur X pour héberger des machines virtuelles utilisant un serveur X ?. Évalué à 2.
Plus d'information à l'adresse suivante :
http://en.wikipedia.org/wiki/Xvfb
Tu ne seras aucunement obligé de lancer un vrai serveur graphique.