add-apt-repository --remove na verdade não remove o repositório, mas o desativa. Se você quiser remover o repositório junto com qualquer pacote que possa ter instalado, você pode usar o ppa-purge:
sudo ppa-purge ppa:cassou/emacs
NOTA: Isso fará o downgrade de quaisquer pacotes que você tenha instalado do PPA para a versão disponível nos repositórios principais. Conforme explicado em man ppa-purge
:
NAME
ppa-purge - disables a PPA and reverts to official packages