Acabei de encontrar um artigo postando como fazer isso no kubuntu.
O mais curto é configurar a associação de arquivos para text / html (incorporação) e definir o primeiro como webkit. Tenho certeza que você deve fazer isso para o aplicativo + xml / xhtml também. Talvez alguns outros.