As permissões Negar têm precedência sobre permissões permitidas.
Além disso, vários usuários não devem ter contas administrativas. Dê a eles a capacidade de escalonar seus privilégios conforme necessário, mas o acesso padrão para todos deve ser o mesmo.
EDIT: O que quero dizer com isto é correr chmod 700 /home/username
.
Segunda edição devido a uma captura muito astuta de @whitequark