virtualisation et applications graphiques

Salut!
Je cherche a isoler des applications graphiques genre media center. Je cherche a savoir s'il existe des solutions de virtualisation sur Linux me permettant de placer ces applications dans des Containers/Machines Virtuelles tout en concervant la possibilite d'affichage grahique.
J'ai teste differentes solutions (OpenVZ, Xen) mais apparement la virtualisation s'entend tres mal avec les applications graphiques. Les seules moyens que j'ai reussi a mettre en oeuvre passaient par la machine hote avec ssh -X, VNC ou autre.
Impossible de permettre un acces direct aux pilotes graphiques depuis un environement isole! Pourtant, il devrait etre possible de supprimer l'acces direct aux pilotes graphiques pour la machine hote pour le donner a une machine virtuelle.
Est-ce que quelqu'un a eu le meme probleme a gerer, et aurait un bout de solution a apporter?
Est-ce que ce type d'architecture a seulement deja ete mis en place?
Merci de vos reponses!