Se bem me lembro, você pode usar usp10.dll para fazer fontes RTL para exibir corretamente. Esta dll pode ser baixada via winetricks. Além disso, se você instalar o Office usando o PlayOnLinux, essa dll será incluída por padrão.
Se você quiser fazer com que os ícones RTL e LTR apareçam nos programas de escritório, você deve primeiro instalar o pacote de idioma Árabe, Herbew, ... no Ubuntu, então você pode executar o wine com o ambiente LANG apropriado. Por exemplo:
LANG=en_us.utf-8 wine /path/to/office/executable
substitua en_us.utf-8 pelo idioma desejado.