Você pode usar uniq(1)
para isso:
uniq -d file.txt
Isso imprimirá apenas as duplicatas. O arquivo de entrada precisa ser classificado de forma que todas as duplicatas sejam consecutivas (o que parece ser), então, execute-o primeiro pela ordenação, se não for.