apaga uma linha se a mesma linha existir na linha anterior

Question

Eu quero remover as linhas que já existem na linha anterior da linha de comando no UNIX. Eu tenho os seguintes dados em um arquivo.

 <xref id="gi_525506931_ref_NP_001266519.1__brain_aromatase"/>
                    <entry ac="IPR002401" desc="Cytochrome P450, E-class, group I" name="Cyt_P450_E_grp-I" type="FAMILY">
                    <entry ac="IPR001128" desc="Cytochrome P450" name="Cyt_P450" type="FAMILY">
                    <entry ac="IPR001128" desc="Cytochrome P450" name="Cyt_P450" type="FAMILY">
                    <entry ac="IPR001128" desc="Cytochrome P450" name="Cyt_P450" type="FAMILY">

Então, deve ficar assim:

 <xref id="gi_525506931_ref_NP_001266519.1__brain_aromatase"/>
                    <entry ac="IPR002401" desc="Cytochrome P450, E-class, group I" name="Cyt_P450_E_grp-I" type="FAMILY">
                    <entry ac="IPR001128" desc="Cytochrome P450" name="Cyt_P450" type="FAMILY">

    

Answer 1

Se você pode garantir que as linhas idênticas serão consecutivas, você pode usar

uniq your_file

e a resposta do cuonglm funcionará mesmo que não seja.

    

Answer 2

com awk :

awk '!a[$0]++' file

Uma explicação para esse idioma é que você pode ler aqui .