Parece que, se você desativar o IntelliSense, o consumo de memória diminuirá drasticamente e o software se tornará muito mais responsivo. Para desativá-lo, vá para Ferramentas - > Opções - > Editor de texto - > Transact-SQL - > IntelliSense e desmarque a caixa. Salve seu trabalho e reinicie o SSMS.
A principal desvantagem é que você perderá o IntelliSense e o Code Outlining. Muito chato, mas pelo menos você pode deixar o SSMS aberto por dias sem problemas.