AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 494889
Accepted
Nick ODell
Nick ODell
Asked: 2019-01-17 09:18:43 +0800 CST2019-01-17 09:18:43 +0800 CST 2019-01-17 09:18:43 +0800 CST

Faça awk produzir erro em não numérico

  • 772

Eu tenho um programa que soma uma coluna em um arquivo:

awk -v col=2 '{sum+=$col}END{print sum}' input-file

No entanto, ele tem um problema: se você fornecer um arquivo que não possui dados numéricos (ou se um número estiver faltando), ele o interpretará como zero.

Eu quero que ele produza um erro se um dos campos não puder ser analisado como um número.

Aqui está um exemplo de entrada:

bob 1
dave 2
alice 3.5
foo bar

Eu quero que ele produza um erro porque 'bar' não é um número, em vez de ignorar o erro.

awk numeric-data
  • 4 4 respostas
  • 1186 Views

4 respostas

  • Voted
  1. Jeff Schaller
    2019-01-17T09:46:27+08:002019-01-17T09:46:27+08:00

    Uma maneira razoável de testar seria comparar o campo usando testes semelhantes a strtod, que é o método que o awk usa para converter strings em números:

    $2 !~ / *[+-]?[[:digit:]]/ { print "NAN: " $2; exit 1; }
    

    O acima difere de strtod, pois não considera INFINITY ou NAN como "números". O requisito de espaço à esquerda pode ser relaxado sob o comportamento de divisão de campo padrão do awk - o que significa que os campos nunca conteriam espaço à esquerda:

    $2 !~ /[+-]?[[:digit:]]/ { print "NAN: " $2; exit 1; }
    

    Um refinamento adicional, graças ao comentário e resposta de Stéphane aqui :

    $2 !~ /^[+-]?([[:digit:]]*\.?[[:digit:]]*([eE][-+]?[[:digit:]]+)?|0[xX][[:xdigit:]]*\.?[[:xdigit:]]*([pP][-+]?[[:digit:]]+)?)$/ { print "NAN: " $2; exit 1; }
    

    Dividido para uma legibilidade um pouco melhor, esse regex é:

    /^[+-]?([[:digit:]]*\.?[[:digit:]]*([eE][-+]?[[:digit:]]+)?|\
            0[xX][[:xdigit:]]*\.?[[:xdigit:]]*([pP][-+]?[[:digit:]]+)?)$/
    

    ... onde a intenção é permitir um possível + ou - à esquerda, então um número de ponto flutuante ou um número hexadecimal. O número de ponto flutuante tem dígitos iniciais opcionais, um separador de opção (aqui fixado para ser um ponto .), seguido por algum número de dígitos, opcionalmente seguido por um expoente. O número hexadecimal deve começar com 0xou 0X, seguido por dígitos hexadecimais, um separador, mais dígitos hexadecimais e, opcionalmente, seguido por uma "potência" (expoente). Todo o segundo campo deve corresponder a um desses formatos (conforme ancorado por ^e $). Omitidas aqui, para fins desta pergunta, estão as opções NAN e INFINITY.

    Outra opção seria forçar uma conversão numérica, depois compará-la com zero e depois comparar a entrada original com algo que converteria em zero; mais especificamente, ele começa com um + ou - opcional, então é seguido por zeros ou seguido por um ponto e zeros:

    { number=0 + $2;
      if (!number && $2 !~ /^[+-]?(0+)|\.0+/)
        print "NAN: "$2;
    }
    
    • 7
  2. Best Answer
    Nick ODell
    2019-01-17T09:51:46+08:002019-01-17T09:51:46+08:00

    Acabei com isso:

    awk -v col=$col '
    typeof($col) != "strnum" {
        print "Error on line " NR ": " $col " is not numeric"
        noprint=1
        exit 1
    }
    {
        sum+=$col
    }
    END {
        if(!noprint)
            print sum
    }' $file
    

    Isso usa typeof, que é uma extensão GNU awk. typeof($col)retorna 'strnum' se $colfor um número válido e 'string' ou 'unassigned' se não for.

    Consulte Posso determinar o tipo de uma variável awk?

    • 5
  3. Uncle Billy
    2019-01-17T17:53:01+08:002019-01-17T17:53:01+08:00
    awk -v col=2 '
        $col+0==0 && $col!~/^[+-]?0/ { print "bad number " $col > "/dev/stderr" } 
        {sum+=$col}
        END{print sum}' input-file
    

    Cabe a você complicá-lo se quiser que ele também trate .0ou .0e+33como representações válidas de 0; observe que awkignorará o lixo à direita ao converter strings em números ( "1.4e1e3"+0, "1.4e1.e7"+0ou "14+13"+0serão todos iguais a 14).

    • 2
  4. DrYak
    2019-01-17T09:41:58+08:002019-01-17T09:41:58+08:00

    Se você fornecer um arquivo que não possui dados numéricos,

    $col ~ /[^-.[:digit:]]/ {print "Error, non-numeric :"; print $col; exit 1};
    

    Explicação basta usar um RegEx para verificar a presença de caracteres que não são dígitos nem ponto flutuante, sinal, etc.

    (ou se faltar um número)

    adicionar

    || ($col == "")
    

    ou

    || (length($col) == 0)
    

    à regra.

    Ou você pode usar uma comparação NFse for a última coluna, como no seu exemplo.

    • 1

relate perguntas

  • remova o número de linhas duplicadas com base na correspondência antes da primeira vírgula

  • anexar linhas após outros arquivos linha por linha

  • Como remover uma única linha entre duas linhas

  • Reorganize as letras e compare duas palavras

  • Embaralhamento de arquivo de várias linhas

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve