Abra um terminal e digite:
rpm -qa | grep chrome
Veja se consegue encontrar o pacote do Chrome instalado e, se o encontrar, digite:
rpm -e <chrome package name here>
Por exemplo:
rpm -e google-chrome-stable-22.0.1229.94-161065.i386
Se você está procurando onde os arquivos estão localizados, pode ser diferente dependendo de uma distro, mas você pode começar marcando a resposta popular aqui .