Será que o alerta está sendo exibido fora da tela? Se você estiver confortável com a edição do registro, poderá navegar para:
HKEY_CURRENT_USER\Software\Microsoft\Office.0\Common\DesktopAlerts
e defina os valores "XOffset" e "YOffset" como zero (ou próximo de zero). Se isso não ajudar, você também pode tentar excluir o valor "Canto", se existir.