Retirar a Permissao de usuario para login em modo grafico

Bom dia, gostaria de saber se existe um modo de bloquear o usuario a fazer login no sistema pelo modo grafico,

permitindo somente acesso remoto via ssh e acesso em sua pasta.

pois o que tenho atualmente permite o usuario logar-se no sistema pelo modo grafico tambem.

SO Ubuntu 9.10

abraço