Usar o ppa xorg-edgers para o trabalho diário pode ser uma péssima ideia.
Pode lhe dar drivers mais recentes, é verdade, mas você também pode obter drivers que não funcionam.
Para remover um PPA e fazer o downgrade dos pacotes substituídos por ele (então, voltando aos disponíveis nos repositórios oficiais), primeiro instale o ppa-purge:
sudo apt-get install ppa-purge
E, em seguida, remova o PPA, fazendo o downgrade dos pacotes oficiais:
sudo ppa-purge ppaname
Isso deve fazer o downgrade de seus pacotes para os oficiais.
Outros pacotes que estavam no PPA, mas não nos repositórios oficiais, não serão desinstalados. Você deve informar manualmente ao gerenciador de pacotes para removê-los, por exemplo, usando o apt:
sudo apt-get purge packagename
Você pode encontrar o nome do ppa olhando a seção "Software Sources" do Ubuntu Settings, e ver uma lista de pacotes que ele fornece em sua página de inicialização (ou olhando a seção "Origin" do Synaptic Package Manager, se instalado).