Você copiou a chave pública no arquivo authorized_key em sua máquina linux?:
Abra o arquivo "C: \ Documents and Settings \ Arpit.ssh \ id_rsa.pub" com o bloco de notas, copie o conteúdo e anexe a .ssh / authorized_key na sua máquina Linux. Então tente novamente