Aparentemente, você pode ajustá-lo:
Setting a minimum font size
Some web sites may display text which is too small to read comfortably. To make such pages easier to read, you can set a minimum font size. On web pages that try to display text smaller than this size, Firefox will enlarge the text to your chosen size.
To set a minimum font size, go to Tools/Options (or Preferences on Mac) and select the "Content" panel. In the "Fonts & Colors" section, immediately after the default font and size selection, click the "Advanced" button. You can specify a minimum font size from the dropdown menu.
Note that some web pages may display incorrectly depending on your choice of a minimum font size.
Fonte: link (role para baixo até o cabeçalho Setting Minimum Font Size
)
Na minha máquina Windows, posso definir este tamanho tão baixo quanto 9 pontos ... espero que ajude!
Instalei o Ubuntu 10.10 em uma máquina virtual e o Firefox já estava pré-instalado - a fonte padrão era Serif e o tamanho de fonte padrão era 16, o mínimo 9. O padrão no meu sistema Windows também é 16. FWIW ...