Isso começou a acontecer depois de instalar o Xubuntu 14.04 em vez de um Ubuntu antigo, então acredito que a placa wireless não seja a culpada. Depois de estar ocioso por um pequeno período de tempo (cerca de 15 a 30 minutos), deixarei de poder me conectar ao computador via SSH ("Rede inacessível"). O computador não solta o WiFi e por exemplo O TeamViewer não solta a conexão.
Curiosamente, se eu começar a pingar meu roteador ou algum site do computador Xubuntu, a conexão SSH irá passar pelo mesmo instante, como se tivesse acabado de acordar. Se sair de uma janela do Terminal com o ping em execução, o computador estará disponível para conexões SSH por dias.
Eu uso o openssh-server.
Se eu deixar uma sessão SSH existente inativa, ela será desconectada após 15 a 30 minutos, a menos que eu deixe um ping no servidor.