Eu não encontrei uma resposta satisfatória para isso. O mais fácil é executar o comando através do sudo, por exemplo
sudo fusermount -u /directory
Eu preferiria manter tudo como usuário, em vez do superusuário, mas essa parece ser a única maneira de fazer isso no momento.