Início / unix / Perguntas / 687142
Accepted
A. Que
Asked: 2022-01-20 20:30:25 +0800 CST

Leitura incremental do tubo

  • 772

Tentar descobrir como ter um script de shell apenas retira blocos de tamanho fixo do stdin. Eu teria pensado que algo assim teria funcionado, mas não funciona:

#!/bin/bash
value=0
while [ "$value" != "-1" ]; do
  read -r -d '' -n 20 value
  if [ "$value" != "-1" ]; then
    dd conv=notrunc status=none of=/path/bigfile.bin bs=1M count=1 seek=$value
  fi
done

Em poucas palavras, estou tentando copiar blocos específicos de um arquivo grande para o mesmo arquivo em um local remoto. Os dados enviados do script de envio possuem um local de bloco (20 bytes) seguido por 1 MiB dos dados a serem gravados nesse local. Termina quando a localização é -1.

Eu tenho uma configuração que funciona bem se estiver executando um programa C compilado, mas gostaria de evitar isso e executar com os comandos shell nativos. O problema é que parece que não ddconsome nenhum dado, e tudo isso é tratado pelo readcomando.

Pode stdinser consumido por vários comandos?

bash shell-script

2 respostas

  1. Você pode ler tudo com dd.

    Isso deve funcionar ( read ... valuese torna value=$(dd bs=20 count=1 status=none)):

    #!/bin/bash
value=0
while [ "$value" != "-1" ]; do
  value=$(dd bs=20 count=1 status=none)
  if [ "$value" != "-1" ]; then
    dd conv=notrunc status=none of=/path/bigfile.bin bs=1M count=1 seek=$value
  fi
done
    • 1
  2. Best Answer

    A resposta para a pergunta real é sim, você pode ler incrementalmente stdinquando canalizado.

    A solução para o problema com o script foi que o ddcomando não estava consumindo 1 MiB de dados. Como escrito dd, leria 65516 bytes, que é 65536 (64 KiB) menos os 20 bytes para o tamanho do bloco. Depois de ler essa quantidade limitada de dados, ddsairia. A solução é usar o sinalizador iflag=fullblock. Além disso, a verificação de -1 não funciona como está escrito. A solução funcional completa é:

    value=0
while [ $value != -1 ]; do
  read -r -d '' -n 20 value
  value=$((value))
  if [ $value != -1 ]; then
    dd iflag=fullblock conv=notrunc status=none \
      of=/path/bigfile.bin bs=1M count=1 seek=$value
  fi
done
    • 0

relate perguntas