Não sei qual pode ser o problema com django , mas você não pode remover pip de si mesmo, como acontece com apt .
Você precisará executar sudo apt-get remove pip pip3 ou, se quiser limpar as configurações do sistema, sudo apt-get purge pip pip3 (se tiver o pip3 instalado).
Quanto ao django, para o qual você não forneceu a saída, é possível também ser instalado por apt , e você pode usar o método acima.
Se isso não for suficiente para você, você pode fazer algo como sudo find . -name '*django*' -exec rm -rf {} \+ , ou algo assim, o que removerá permanentemente todos os arquivos com django em qualquer lugar do nome .