Edite o arquivo /etc/ssh/sshd_config
e adicione a diretiva DenyUsers user1 user2 ...
. Como alternativa, se todos os usuários que não devem ter acesso SSH fizerem parte do mesmo grupo (digamos ftpusers), você poderá usar DenyGroups ftpusers
. Em seguida, reinicie o sshd com /etc/init.d/sshd restart