Na configuração dos serviços de terminal - > Conexões
Clique com o botão direito do mouse em RDP-Tcp, escolha as propriedades e selecione a guia "Sessões".
Você verá as opções para encerrar sessões desconectadas ou ociosas após x minutos, horas ou dias.