O método mais fácil que vejo é digitar "O rápido ... cachorro preguiçoso" como amostra. Selecione e visite:
Format > Character.
O texto selecionado será visualizado em vez do nome da fonte.
Problemas com este método: ele exibirá os primeiros 25 caracteres ou mais e truncará no espaço mais próximo. Isso pode ser evitado se você não usar espaços e ajustar caracteres 52ish na janela, mas poderá perder o efeito das quebras.
Pode haver métodos melhores, mas esse está dentro do programa.
Como alternativa, você pode percorrer a barra de ferramentas de fontes com o texto selecionado. Mas isso pode envolver muitos cliques.
Além disso, você pode usar uma ferramenta do Windows chamada fontview.exe (localizada em %windir%\System32\ ) (Outros SOs podem ter programas semelhantes).
Estou executando o OpenOffice 3.1.0 Full Install, sem modificações.