Encontrou a solução para este problema. Parece que o pure-ftpd-common também foi instalado, eu acho que este pacote funciona com os arquivos de configuração e o seguinte comando resolve esse problema;
apt-get remove --purge pure-ftpd pure-ftpd-common