Início / unix / Perguntas / 482778
Accepted
Siva
Asked: 2018-11-20 06:56:10 +0800 CST

Média das últimas n partidas usando awk

  • 772

Eu tenho um arquivo crescente. while irá escrever o log do meu processo de aplicação. Nesse arquivo, há um log para "velocidade" como abaixo

(some text)
speed= 1x
(some text)
speed= 1x
(some text)
speed= 1x
(some text)
speed= 0.9x
..
..
(some text)
speed= 0.8x
(some text)

Eu tentei o código abaixo para obter o valor médio da velocidade.

 awk '/speed/ {gsub("x","");print $2}' $PROCESS_LOG_FILE | awk -F : '{sum+=$1} END {print sum/NR}'

é possível obter a média das últimas 120 entradas? Eu tentei com grep e tail, mas demorou muito tempo desde que é um arquivo crescente.

linux awk

4 respostas

  1. Best Answer

    Um pouco exagerado, talvez, mas como taco lseekarquivo momentâneo terminará, você definiria o ponto no tempo necessário e, a partir daí, retrocederia até 120 velocidades encontradas:

    tac file | awk '/speed/ {SUM += $2; if (++C == 120) {print SUM/C; exit}}'

    Ou para lidar com entradas que podem ter menos de 120 ocorrências do padrão:

    tac file | awk '/speed/ {SUM += $2; if (++C == 120) exit}
                END {if (C) print SUM/C}'
    • 2

  2. Eu usaria perl em vez de awk para isso: bastante simples de lembrar apenas as últimas 120 velocidades:

    perl -MList::Util=sum -nE '
    if (/speed= ([\d.]+)/) {@speeds = ($1, @speeds)[0..119]} 
    # could also write:
    #   if (/speed= ([\d.]+)/) {push @speeds, $1; shift @speeds if @speeds > 120}

    END {say @speeds == 0 ? "No matches" : sum(@speeds)/@speeds}
' speed.log
    • 1

  3. Isso funciona para você?

    grep speed test | tail -n 120 | cut -d " " -f 2 | cut -d "x" -f 1 | awk -F : '{sum+=$1} END {print sum/NR}'

    Acabei de colocar sua entrada em um arquivo chamado teste executei isso. Resultado:

    0.94

    No entanto, não é possível dizer qual será o desempenho em um arquivo enorme.

    • 0

  4. Você terá que usar uma tabela circular, aqui está um código de exemplo com os últimos 5 valores

    BEGIN { maxi=5 ; c=0 ; nb=0 ;  }
/^speed/ { list[nb++]=$2 ; nb=nb % maxi ;
   c++ ; if (c> maxi) c=maxi ;
   s=0 ;
   for(i=0;i<=c;i++) s+=list[i] ;
   printf "NR: %d, c=%d, s=%d AVG : %3.2f\n",NR,c,s,s/c ;
}

    você pode testar em um arquivo de amostra (ou na linha de comando, valores a serem inseridos na linha de comando).

    awk -f avg.awk sample.txt

    em seguida, substitua 5 por 120 e printfalinhe com o que mais lhe convier.

    note que +=$2irá ignorar o trailing x.

    • 0

relate perguntas