As partes da janela que você apontou são renderizadas pelo cliente, ou seja, o próprio aplicativo. Os temas do Openbox aplicam-se apenas à decoração da janela. Para alterar a aparência de seus aplicativos, você terá que definir um tema GTK com uma ferramenta como LXAppearance .