Sim, por configuração padrão, todos os usuários podem ver todas as casas. Você pode alterar essa configuração, se quiser. Veja este guia em help.ubuntu.com
Como Eliah Kagan notou, os administradores sempre poderão usar seus poderes administrativos para ver qualquer coisa dentro pasta pessoal de qualquer usuário. Se você quiser evitar isso, você precisa criptografar sua casa.