Ou alguém estava tentando forçar sua senha ou menos provável que eles estivessem tentando violar suas chaves ssh. O SSHD não registrará falhas em alguns casos. Houve alguma discussão em listas de discussão que você poderia quebrar chaves ssh através de uma força bruta remota em menos de 2 horas.
Justin Mason tem um bom artigo em seu blog sobre isso.