Remover um arquivo significa alterar o diretório que os contém. As permissões do arquivo (e sua propriedade) são irrelevantes.
Portanto, se você tiver permissões de gravação para o diretório contido, um rm
simples deve funcionar.
Se você não fizer isso, você terá que chmod +w .
primeiro.