Se você baixou a versão do Apache do site , baixou um arquivo "tar.gz" e o extraiu em seu sistema. O Ubuntu Software Center não saberá nada sobre sua instalação, portanto apt-get
não é o método correto.
Desinstalar é igual a remover o diretório no qual você o extraiu. Então abra um terminal, navegue até o diretório em que você o extraiu e remova o diretório "hbase-0.94.20 /".
Vamos supor que você tenha extraído o software em "Downloads" na sua "Página inicial". Abra um terminal com Ctrl + Alt + T
cd ~/Downloads
rm -rf hbase-0.94.20/
exit