AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 717995
Accepted
CarLaTeX
CarLaTeX
Asked: 2022-09-21 08:13:41 +0800 CST2022-09-21 08:13:41 +0800 CST 2022-09-21 08:13:41 +0800 CST

Divida um registro por tipo de registro e relate qualquer tipo de registro inesperado

  • 772

Eu tenho um myfile.txtque contém vários tipos de registro.
O tipo de registro está na posição 27, com comprimento de 3 caracteres, assim:

12345678901234567890123456E20XXXXXXXXX
12345678901234567890123456I47XXXXXXXXX
12345678901234567890123456I49XXXXXXXXX
12345678901234567890123456I50XXXXXXXXX
12345678901234567890123456W55XXXXXXXXX
12345678901234567890123456E20XXXXXXXXX
12345678901234567890123456I47XXXXXXXXX
12345678901234567890123456Q11XXXXXXXXX
12345678901234567890123456R11XXXXXXXXX
12345678901234567890123456W55XXXXXXXXX
12345678901234567890123456E20XXXXXXXXX
12345678901234567890123456I47XXXXXXXXX
12345678901234567890123456I49XXXXXXXXX
12345678901234567890123456I50XXXXXXXXX
12345678901234567890123456Q11XXXXXXXXX
12345678901234567890123456R11XXXXXXXXX
12345678901234567890123456W55XXXXXXXXX

Eu gostaria de dividi-lo por tipo de registro, assim:

grep -E '^.{26}(E20)' myfile.txt > E20.txt
grep -E '^.{26}(I47)' myfile.txt > I47.txt
grep -E '^.{26}(I49)' myfile.txt > I49.txt
grep -E '^.{26}(I50)' myfile.txt > I50.txt
grep -E '^.{26}(Q11)' myfile.txt > Q11.txt
grep -E '^.{26}(R11)' myfile.txt > R11.txt
grep -E '^.{26}(W55)' myfile.txt > W55.txt

e fazer outra coisa, por exemplo

echo "Unexpected record type"

quando o tipo de registro não está em (E20, I47, I49, I50, Q11, R11, W55).

Por exemplo, E20.txto arquivo será:

12345678901234567890123456E20XXXXXXXXX
12345678901234567890123456E20XXXXXXXXX
12345678901234567890123456E20XXXXXXXXX

e assim por diante.

Existe uma maneira elegante de fazer isso (em um script) no Linux?

text-processing scripting
  • 2 2 respostas
  • 155 Views

2 respostas

  • Voted
  1. Best Answer
    terdon
    2022-09-21T08:48:17+08:002022-09-21T08:48:17+08:00

    Aqui está uma awkmaneira. Primeiro, crie um arquivo com os registros "bons", um por linha:

    $ cat goodRecs 
    E20
    I47
    I49
    I50
    Q11
    R11
    W55
    

    Então:

    gawk 'FNR==NR{good[$1]; next} 
         { 
            rec=substr($1,27,3); 
            if(rec in good){
                print > rec".txt"
            }
            else{
                print "Bad record: "rec
            }
        }' goodRecs myfile.txt 
    
    • 5
  2. Ed Morton
    2022-09-21T15:10:30+08:002022-09-21T15:10:30+08:00

    Usando qualquer awk e qualquer tipo:

    $ cat tst.sh
    #!/usr/bin/env bash
    
    awk '
        BEGIN {
            split("E20 I47 I49 I50 Q11 R11 W55",tmp)
            for ( i in tmp ) {
                expected[tmp[i]]
            }
        }
        {
            type = substr($0,27,3)
            if ( type in expected ) {
                print type, NR, $0
            }
            else {
                printf "%s[%d]: Unexpected record type \"%s\"\n", FILENAME, FNR, type | "cat>&2"
            }
        }
    ' "${@:--}" |
    sort -k1,1 -k2,2n |
    awk '
        $1 != prev {
            close(out)
            out = $1 ".txt"
            prev = $1
        }
        { print $3 > out }
    '
    

    $ ./tst.sh myfile.txt
    

    $ head [A-Z]*.txt
    ==> E20.txt <==
    12345678901234567890123456E20XXXXXXXXX
    12345678901234567890123456E20XXXXXXXXX
    12345678901234567890123456E20XXXXXXXXX
    
    ==> I47.txt <==
    12345678901234567890123456I47XXXXXXXXX
    12345678901234567890123456I47XXXXXXXXX
    12345678901234567890123456I47XXXXXXXXX
    
    ==> I49.txt <==
    12345678901234567890123456I49XXXXXXXXX
    12345678901234567890123456I49XXXXXXXXX
    
    ==> I50.txt <==
    12345678901234567890123456I50XXXXXXXXX
    12345678901234567890123456I50XXXXXXXXX
    
    ==> Q11.txt <==
    12345678901234567890123456Q11XXXXXXXXX
    12345678901234567890123456Q11XXXXXXXXX
    
    ==> R11.txt <==
    12345678901234567890123456R11XXXXXXXXX
    12345678901234567890123456R11XXXXXXXXX
    
    ==> W55.txt <==
    12345678901234567890123456W55XXXXXXXXX
    12345678901234567890123456W55XXXXXXXXX
    12345678901234567890123456W55XXXXXXXXX
    

    O acima usa o idioma DSU (Decorate/Sort/Undecorate) para tornar o script muito eficiente, robusto e portátil, mantendo a ordem de entrada para chaves duplicadas.

    • 4

relate perguntas

  • Reorganize as letras e compare duas palavras

  • Subtraindo a mesma coluna entre duas linhas no awk

  • Renomeie (acrescentar) arquivos CSV em massa com base em um valor dentro

  • Embaralhamento de arquivo de várias linhas

  • como posso alterar o caso do caractere (de baixo para cima e vice-versa)? ao mesmo tempo [duplicado]

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve