Os 's' que você está vendo na posição "executar" na coluna de usuários e grupos são os bits SetUID (Definir ID do Usuário na Execução) e SetGID (Definir ID do Grupo na execução).
As permissões do arquivo Unix são na verdade um número octal de 4 dígitos SUGO
S controla os bits SetUID (4), SetGID (2) e "Sticky" (1)
U controla os bits de leitura (4) / gravação (2) / execução (1) para o proprietário do arquivo
G controla os bits de leitura / gravação / execução para o grupo do arquivo
O controla os bits de leitura / gravação / execução para todos os outros.
Você pode remover os bits setuid de seu diretório com o diretório chmod ug-s, se houver um subdiretório incluído use a opção -R.