Início / unix / Perguntas / 544887
Accepted
干猕猴桃
Asked: 2019-10-04 02:13:56 +0800 CST

Excluir linha se a próxima linha for a mesma

  • 772

Que comando sed/awk posso usar? Apenas sort -uirá remover todas as instâncias

Entrada:

abc
abc
def
abc
abc
def

Saída esperada:

abc
def
abc
def
text-processing

3 respostas

  1. Best Answer

    É para isso que serve o uniqcomando padrão.

    uniq your-file

    Observe que algumas uniqimplementações como GNU uniqfornecerão a primeira de uma sequência de linhas que classificam da mesma forma (onde strcoll()retorna 0) em vez de serem idênticas byte a byte (onde memcmp()ou strcmp()retorna 0). Para forçar uma comparação byte a byte independentemente da uniqimplementação, você pode forçar a localidade Ccom:

    LC_ALL=C uniq your-file
    • 36

  2. O Vim pode conseguir isso muito bem:

    :g/\v^(.*\n)\1/d

    Ou se você preferir usar o vim como uma ferramenta de linha de comando, você pode fazer isso como

    vim file -c "g/\v^(.*\n)\1/d" -c "wq"

    Dessa forma, você não precisa lutar para sair do vim mais tarde;)

    Explicação:

    :g/

    Em todas as linhas que correspondem a este regex...

    \v^(.*\n)\1

    Qualquer linha seguida por si mesma...

    /d

    execute o comando d elete (exclua a linha atual). O -c "wq"é para salvar as alterações e sair.

    • 7

  3. Aqui está um awkequivalente:

    awk 'p!=$0; {p=$0}' file

    p!=$0;linha de impressão se não for idêntica à anterior, ;é necessário aqui. {p=$0}definido ppara a linha atual.

    Um bug óbvio está faltando a primeira linha se estiver vazia. Uma correção simples é:

    awk 'NR==1 || p!=$0; {p=$0}' file
    • 0

relate perguntas