Ok, já que aparentemente não há nenhum pacote que, quando ruim, devemos removê-lo manualmente sem a ajuda do apt-get:
sudo apt-get update
sudo apt-get -s --reinstall install xserver-common
sudo dpkg --purge --force-all xserver-common-lts-raring
sudo apt-get --reinstall install xserver-common
sudo apt-get autoremove
Agora, talvez você queira desativar o pacote que você tem:
sudo dpkg --set-selections < echo "libboost-dev install"
sudo dpkg --set-selections < echo "libboost-filesystem-dev install"
sudo dpkg --set-selections < echo "libboost-regex-dev install"
sudo dpkg --set-selections < echo "libboost-system-dev install"
sudo dpkg --set-selections < echo "libboost-thread-dev install"
Faça um% final sudo apt-get check
para verificar se tudo está bem.