Você não mencionou qual versão do Word está usando. Essa resposta veio do Word 2010, mas deve ser aplicável a outras versões.
Clique com o botão direito do mouse * na caixa de texto e encontre a configuração "Wrap Text" (também disponível na guia Format Tools Drawing da faixa de opções, no grupo "Arrange"). Tente experimentar outras configurações. Consegui reproduzir o problema que você descreveu ao usar a configuração "Quadrado", mas alterá-lo para "Apertado" resolveu isso para mim.
(* Nota: se você clicar com o botão direito do mouse na caixa de texto e não visualizar a opção Quebrar texto, significa que você selecionou inadvertidamente o texto dentro da caixa de texto. Clique na borda de a caixa e tente novamente.)
Ah, e seja bem-vindo ao Superusuário.