Para acessarmos uma maquina virtual xen a partir de uma maquina remota usando o Virt-Manager siga as instruções:
root@suporte-desktop:~# ssh-keygen -t rsa
root@suporte-desktop:~# ssh-copy-id -i ~/.ssh/id_rsa.pub root@ip_da_maquina_remota
root@suporte-desktop:~# chkconfig libvirtd on
root@suporte-desktop:~# service libvirtd start