Tente isso e deixe-me saber
alterar a propriedade do arquivo
chown root: user1 dir1
chown root: user2 dir2
chown root: user3 dir3
altere a permissão do arquivo
chmod 764 user1
chmod 764 user2
chmod 764 user3
Espero que você tenha a permissão de root
Se não, use o sudo
você precisa adicionar os usuários em um grupo, por exemplo, group1
groupadd group1
useradd -G group1 user1
useradd -G group1 user2
useradd -G group1 user3
agora você pode fazer setfacl ACL para o usuário1 para usar dir1 dir2 & dir3
setfacl -R g: group1: rwx