AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 736407
Accepted
MAK33
MAK33
Asked: 2023-02-22 08:15:37 +0800 CST2023-02-22 08:15:37 +0800 CST 2023-02-22 08:15:37 +0800 CST

String delimitada não dinâmica para obter o relacionamento pai-filho

  • 772

Eu tenho um cenário em que preciso desarticular os dados para alcançar o relacionamento pai-filho. Meus dados de origem são os seguintes:

Key_Col|Hierarquia

1|a,b,c,d

2|a,b,c,d,e

Minha saída esperada abaixo:

Chave Col Criança Pai
1 d c
1 c b
1 b a
1 a nulo
2 e d
2 d c
2 c b
2 b a
2 a nulo

Você poderia me informar como posso conseguir isso por meio de um script bash?

O script que usei é:

Var="1|a,b,c,d";
for i in $Var
do
 Key=`echo $i |cut -d'|' -f1`
 Hierarchy=`echo $i |cut -d'|' -f2`
 Delim_Count=`echo ${Hierarchy} |awk -F',' '{ print NF-1 }'`
 for (( c=$Delim_Count+1; c>=1; c-- ))
 do
   Parent=`echo ${Hierarchy} |cut -d',' -f$c`
   Prev=`expr $c - 1`
   if [ $Prev -ne 0 ]; then
    Child=`echo ${Hierarchy} |cut -d',' -f${Prev}`
    echo "${Key}|${Parent}|${Child}"
   else
    echo "${Key}|${Parent}|"
   fi
 done
done

Mas o problema é que, se houver mais de 100 linhas, o script levará muito tempo para ser concluído.

bash
  • 1 1 respostas
  • 60 Views

1 respostas

  • Voted
  1. Best Answer
    Kusalananda
    2023-02-23T17:40:38+08:002023-02-23T17:40:38+08:00

    Coisas como essas geralmente são mais fáceis de fazer com uma linguagem feita para processar texto ou dados estruturados. Abaixo está uma solução usando o utilitário de processamento de texto padrão awke outra usando Miller ( mlr), uma ferramenta usada especificamente para processar dados estruturados (seus dados se parecem com CSV).


    Com awk:

    $ cat file
    Key_Col|Hierarchy
    1|a,b,c,d
    2|a,b,c,d,e
    
    $ awk 'BEGIN { OFS=FS="|" } NR == 1 { print $1, "Child", "Parent"; next } { n=split($2,a,","); a[0]="null"; for (i=n;i>0;i--) print $1,a[i],a[i-1] }' file
    Key_Col|Child|Parent
    1|d|c
    1|c|b
    1|b|a
    1|a|null
    2|e|d
    2|d|c
    2|c|b
    2|b|a
    2|a|null
    

    O awkcódigo acima lê cada linha de entrada como um conjunto de |campos delimitados por -. Ele divide o segundo campo nas vírgulas na matriz a. O elemento zero do array é definido como a string null( split()cria um array cujo primeiro índice é 1 , então sabemos que podemos usar o índice 0 sem sobrescrever os dados). Em seguida, iteramos do final da matriz para o início, gerando o valor do primeiro campo com o elemento atual da matriz e o elemento anterior na matriz. Quando chegarmos à última iteração, nossa variável de loop terá o valor 1, o que faz com que a[1]e a[0]( null) sejam impressos.

    A primeira linha de entrada, que contém um cabeçalho, é tratada de forma diferente. Em vez de dividir etc., o código imprime três campos: o primeiro campo da entrada e um campo cada para as strings Childe Parent. O bloco condicional NR==1faz isso.

    O awkcódigo, reformatado para facilitar a leitura:

    BEGIN {
        OFS = FS = "|"
    }
    
    NR == 1 {
        print $1, "Child", "Parent"
        next
    }
    
    {
        n = split($2, a, ",")
        a[0] = "null"
        for (i = n; i > 0; i--)
            print $1, a[i], a[i-1]
    }
    

    Como a entrada se parece com CSV, pode ser mais seguro usar uma ferramenta compatível com CSV para processá-la. Miller ( mlr) é uma dessas ferramentas:

    $ mlr --csv --fs pipe put -q 'm=splitnv($Hierarchy,","); m[0]="null"; for (var i=length(m)-1;i>0;i-=1) { emit {"Key_Col": $Key_Col, "Child": m[i], "Parent": m[i-1] } }' file
    Key_Col|Child|Parent
    1|d|c
    1|c|b
    1|b|a
    1|a|null
    2|e|d
    2|d|c
    2|c|b
    2|b|a
    2|a|null
    

    A putexpressão Miller segue o mesmo esquema do awkcódigo acima, mas sem ter que lidar com os cabeçalhos como um caso especial já que Miller sabe como ler e usar estes:

    m = splitnv($Hierarchy, ",")
    m[0] = "null"
    
    for (var i = length(m) - 1; i > 0; i -= 1) {
        emit {
            "Key_Col": $Key_Col,
            "Child": m[i],
            "Parent": m[i-1]
        }
    }
    

    Miller nos permite produzir o resultado de muitas formas diferentes ajustando as opções antes do putsubcomando.

    Saída "barrada" bem impressa:

    $ mlr --c2p --barred --ifs pipe put ...as above...
    +---------+-------+--------+
    | Key_Col | Child | Parent |
    +---------+-------+--------+
    | 1       | d     | c      |
    | 1       | c     | b      |
    | 1       | b     | a      |
    | 1       | a     | null   |
    | 2       | e     | d      |
    | 2       | d     | c      |
    | 2       | c     | b      |
    | 2       | b     | a      |
    | 2       | a     | null   |
    +---------+-------+--------+
    

    JSON:

    $ mlr --c2j --ifs pipe put ...as above...
    { "Key_Col": 1, "Child": "d", "Parent": "c" }
    { "Key_Col": 1, "Child": "c", "Parent": "b" }
    { "Key_Col": 1, "Child": "b", "Parent": "a" }
    { "Key_Col": 1, "Child": "a", "Parent": "null" }
    { "Key_Col": 2, "Child": "e", "Parent": "d" }
    { "Key_Col": 2, "Child": "d", "Parent": "c" }
    { "Key_Col": 2, "Child": "c", "Parent": "b" }
    { "Key_Col": 2, "Child": "b", "Parent": "a" }
    { "Key_Col": 2, "Child": "a", "Parent": "null" }
    

    (etc.)

    • 1

relate perguntas

  • exportar variáveis ​​​​env programaticamente, via stdout do comando [duplicado]

  • Problema estranho ao passar variáveis ​​do arquivo de texto

  • Enquanto a linha lê mantendo os espaços de escape?

  • ordem de substituição de processos `te` e `bash`

  • Execute um script muito lento até que seja bem-sucedido

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve