A resposta geral é: você não pode . O Framebuffer é um modo diferente (você pode dizer: mais "básico") de fazer interface com os gráficos do que um servidor X cria. Somente os aplicativos que foram projetados para utilizar um framebuffer são capazes de fazê-lo. E não há muitos aplicativos gráficos que contenham tal suporte - o framebuffer é usado principalmente para aplicativos de modo de texto (console). O Firefox é um exemplo clássico de um aplicativo que foi projetado para rodar em cima de um servidor Xorg (assim como a maioria dos aplicativos gráficos).
No entanto, se você estiver realmente interessado, existem alguns projetos que usam o framebuffer como base para aplicativos gráficos um pouco mais avançados. Provavelmente, o mais avançado pode ser encontrado na página do projeto DirectFB . Na verdade, isso contém algumas informações sobre a execução do Firefox no modo framebuffer (ou seja, no ambiente DirectFB). Observe, entretanto, que é apenas uma porta experimental do Firefox - muito antiga e aparentemente abandonada por volta de 07-2008.