Início / unix / Perguntas / 701844
Accepted
Rama Krishna Majety
Asked: 2022-05-09 07:00:00 +0800 CST

AWK um liner para mesclar três campos em um único arquivo

  • 772

Tenho um arquivo com registros (linhas) tendo dois tipos de delimitadores de campo |e !conforme abaixo:

Name|Age|Physics|Chemistry|Maths|English|Batch!Year!AdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS!2021!1001!A!75
Student2|72|63|60|50|75|EWS!2021!1002!A!85
Student3|72|63|60|50|75|EWS!2021!1002!A!85

Como mesclar Batche campos conforme indicado abaixo Year?AdmisnNo

Observe que, por brevidade, mostrei uma pequena lista de campos úteis, onde meus arquivos reais têm muitos desses campos relacionados. Este campo onde quero remover duas ou três !marcas não é o último e pode ser qualquer campo (6 ou 7 ) de um total de campos em torno de 49.

Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
    Student1|81|65|70|80|88|EWS20211001!A!75
    Student2|72|63|60|50|75|EWS20211002!A!85
    Student3|72|63|60|50|75|EWS20211002!A!85

Eu solicitei awk, no entanto, qualquer comando razoavelmente padrão é bem-vindo.

awk columns

6 respostas

  1. $ cat in | while read -r line ; do line="${line/\!/}" ; echo "${line/\!/}"; done
Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85
    • 1
  2. Best Answer
    $ awk -F '|' 'BEGIN { OFS = FS } { sub("!", "", $NF); sub("!", "", $NF) }; 1' file
Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85

    Isso é usado awkpara excluir os dois primeiros !caracteres do último |campo delimitado da entrada.

    Use qualquer número no lugar de NFno awkcódigo para afetar algum outro campo que não o último campo.

    Supondo que apenas o último campo contenha !caracteres, usando sed:

    $ sed -e 's/!//' -e 's///' file
Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85

    Isso remove o primeiro !em cada linha. Em seguida, ele executa exatamente a mesma substituição uma segunda vez, removendo a segunda !também.

    Invertendo cada linha e removendo a 3ª !duas vezes seguidas, invertendo a linha resultante novamente. Isso permite que outros |campos delimitados também contenham !caracteres.

    $ rev file | sed -e 's/!//3' -e 's///3' | rev
Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85
    • 1

  3. Essa tarefa é boa para sed, sem dividir os campos, mesclar o 7º campo com o próximo:

    sed -E 's/|\|!//7' file

    Correr mais uma vez mesclará o 7º (inicialmente o 8º) com o próximo. Totalmente:

    sed -Ee 's/|\|!//7' -Ee 's/|\|!//7' file

    Ou mais brevemente (sugerido por Philippos), pois a segunda substituição acontecerá se a primeira acontecer:

    sed -E 's/\||!//7;s///7' file

    Também -Eé usado para portabilidade, ou seja, para expressões regulares estendidas.

    Resultado:

    Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85

    Observe que após a primeira substituição, o 8º campo se tornou o 7º, então usamos 7novamente para ele. É o mesmo que fazer sed '' file | sed ''.

    Também é conveniente sobre os diferentes separadores de campo que você tem aqui e pode ser ajustado para mesclar quase todos os campos vizinhos.

    • 1

  4. Usando GNU awk para o 4º argumento para split():

    $ awk '{n=split($0,f,/[|!]/,s); s[7]=s[8]=""; for (i=1;i<=n;i++) printf "%s%s", f[i], s[i]; print ""}' file
Name|Age|Physics|Chemistry|Maths|English|BatchYearAdmisnNo!Grade!Score
Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85
    • 1

  5. Trabalhou para o exemplo acima e obteve a saída desejada

    sed -e 's/!//1' -e 's/!//1' file.txt

    resultado

    Student1|81|65|70|80|88|EWS20211001!A!75
Student2|72|63|60|50|75|EWS20211002!A!85
Student3|72|63|60|50|75|EWS20211002!A!85
    • 1

  6. Aqui está apenas uma solução perl possível

    perl -pe '@a = split /[|!]/; $_ = join "|", @a[0..5], join("!", join("", @a[6..8]), @a[9,10]);' file

    escrito com uma série de joins para que, se o seu caso de uso ficar mais complicado, digamos que você queira descartar a matemática, basta descartar esse índice (4)

    perl -pe '@a = split /[|!]/; $_ = join "|", @a[0..3,5], join("!", join("", @a[6..8]), @a[9,10]);'

    Parecia mais limpo do que concatenar campos e emendar os campos extras da matriz antes de juntar novamente.

    • 1

relate perguntas