Você diz que está se conectando para trabalhar em um computador em casa, certo?
O lugar com o Ubuntu PC tem que estar com um IP estático.
Depois, certifique-se de que seu ISP não está bloqueando a porta 22. (você pode alterá-lo para, digamos, 2222)
Se você estiver usando o roteador onde está o seu Ubuntu PC, verifique se a porta está encaminhada para o PC e se você está usando o IP público e não o LAN (geralmente eles começam com 192.168.
ou 10.0.
) .