AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 707263
Accepted
Sollosa
Sollosa
Asked: 2022-06-24 09:46:33 +0800 CST2022-06-24 09:46:33 +0800 CST 2022-06-24 09:46:33 +0800 CST

substitua o texto no campo específico por variáveis ​​do loop

  • 772

Eu tenho um arquivo enorme para analisar e preciso pesquisar e substituir texto, mas em campos específicos, compartilhando uma pequena amostra para referência chamada dest. a primeira linha é o cabeçalho para referência.

cat dest
ID|NAME|COMPANY|NUMBER
1001|Adam||15001
1002|eve|adam&eve|15002
1003|||
1004|||50000
1005|||50001

Eu tenho arquivos separados que contêm padrão para corresponder, texto a ser substituído e texto a ser substituído

cat src
1003||15003
1004|50000|15004
1005|50001|15005

para que eu possa executar um loop while abaixo com sed para alcançar as últimas 2 linhas do arquivo src.

cat src | while IFS=$'|'; read id old new; do sed -i "/^${id}/s/${old}/${new}/" dest; done

mas para ID=1003recebo uma string vazia para $old, e ele substituirá todas as colunas vazias no arquivo dest para esse ID. O que eu quero evitar. O que eu quero fazer é substituir apenas o último campo.

DESEJADO:

ID|NAME|COMPANY|NUMBER
1001|Adam||15001
1002|eve|adam&eve|15002
1003|||15003
1004|||15004
1005|||15005

Eu poderia usar o awk, pois é mais granular, quando se trata de dados colunares. mas o awk imprimirá várias vezes para stdout, tanto quanto eu entendo, o que também não é prático no meu caso.

então existe uma maneira de fazer isso de maneira inteligente e concisa?

awk sed
  • 2 2 respostas
  • 110 Views

2 respostas

  • Voted
  1. Best Answer
    αғsнιη
    2022-06-24T10:12:30+08:002022-06-24T10:12:30+08:00
    awk 'BEGIN{ FS=OFS="|" }
     NR==FNR  { id[$1, $2]=$3; next }
              { $4=( ($1, $4) in id? id[$1, $4]: $4) } 1' src dest
    
    • FS: S eperador de campo

    • OFS: S eperador de campo de saída

    • NR==FNR: Um idioma de condição sempre verdadeiro para o primeiro arquivo de entrada.

      NR está presente o número total de registros que awk leu ;
      FNR está presente no número de registros de cada arquivo individual.

    • id[$1, $2]=$3: uma matriz awk associada.

      Nome:
      chave id: coluna#1+coluna#2
      valor: coluna#3

      primeiro bloco é executado apenas para o primeiro arquivo de entrada, i. e, arquivo src .

    Neste $4=($1, $4) in id? id[$1, $4]: $4, estamos atualizando o valor da última coluna ( $NFou $4) do segundo arquivo, i. e, arquivo dest da combinação de chaves correspondentes da coluna#1+coluna#4 na matriz id , se encontrado, retorne esse valor ( id[$1, $4]), caso contrário, copie seu valor atual.

    • 3
  2. Kusalananda
    2022-06-24T22:31:13+08:002022-06-24T22:31:13+08:00

    Outra awksolução, que pressupõe que as linhas de srcserão usadas exatamente uma vez cada e em ordem. Isso nos permite acompanhar apenas a próxima linha srcaté que ela tenha sido usada e, em seguida, ler a próxima.

    awk -F '|' '
        BEGIN { OFS=FS }
        ! have {
            getline line <"src"
            split(line, pat)
            have = 1
        }
        $1 == pat[1] {
            if ($4 == pat[2]) $4 = pat[3]
            have = 0
        }; 1' dest
    

    Se o sinalizador havenão estiver definido ou for zero, a próxima linha de srcserá lida linee dividida no array pat. Isso é feito no ! havebloco.

    Se a linha atual de entrada de desttiver um 1º campo idêntico ao primeiro elemento de pat, testaremos o 4º campo pat[2]e o substituiremos pat[3]se forem iguais. O havesinalizador é então redefinido para zero para acionar a leitura de uma nova linha de src.

    A trilha 1no final do awkprograma faz com que o registro (possivelmente modificado) seja gerado.

    A saída, dados os dados na pergunta:

    ID|NAME|COMPANY|NUMBER
    1001|Adam||15001
    1002|eve|adam&eve|15002
    1003|||15003
    1004|||15004
    1005|||15005
    
    • 1

relate perguntas

  • Como posso melhorar este script de conversão de personagens?

  • Como remover uma única linha entre duas linhas

  • Reorganize as letras e compare duas palavras

  • Embaralhamento de arquivo de várias linhas

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve