Contar instâncias uniq de blocos de 2 linhas [fechado]

paste - - < file | sort | uniq -c

Aqui está uma solução awkse você deseja um formato de saída personalizado

NR%2==1 {ip=$0; next}
NR%2==0 {a[ip"\n"$0]++}
END {
    for(i in a)
        printf "%s %d times\n", i, a[i]
}

o script pode ser executado como

awk -f main.awk file

Explicação

• Primeiro, usamos NR%2==1para corresponder às linhas de número ímpar, já que o módulo de número ímpar 2 é igual a 1, se qualquer linha corresponder a essa condição, salvamos a linha inteira $0em uma variável chamada ip. Podemos usar nextpara pular qualquer processamento adicional e ir direto para a próxima iteração.

• Em segundo lugar, usamos NR%2==0para corresponder linhas de números pares, se uma linha corresponder, criamos um índice rotulado como ip"\n"$0em uma matriz ae incrementamos o valor de contagem desse índice específico. Por exemplo, uma expansão equivalente seria como

  a["144.252.36.69 afrloop=32235330165603"] += 1
  

  Eu ignorei a nova linha \nneste exemplo apenas para simplificar

• Finalmente em END, após cada linha ter sido processada, usamos um forloop para imprimir o valor de cada elemento dentro do array aque, no nosso caso, é o número de contagem para cada índice único

Referência divertida

• Geração de arquivo de teste (1 milhão de registros)

  awk '
      BEGIN{for(i=1;i<10000000;i++)
      printf "%d\nafrLoop=%d\n", int(rand()*100), int(rand()*10)}
  ' > test
  
  $ head test
  23
  afrLoop=2
  84
  afrLoop=1
  58
  

• @n.caillou solução de pasta

  $ time paste - - < test | sort | uniq -c > /dev/null
  real    0m11.250s
  user    0m11.352s
  sys     0m0.272s
  

• solução awk

  $ time awk -f main.awk test > /dev/null
  real    0m5.673s
  user    0m5.636s
  sys     0m0.036s