Início / unix / Perguntas / 546465
Accepted
manifestor
Asked: 2019-10-13 03:22:39 +0800 CST

bzip2: Verifica o tamanho descompactado do arquivo sem realmente descompactá-lo

  • 772

Eu tenho um grande bzip2arquivo compactado e preciso verificar seu tamanho descompactado sem realmente descompactá-lo (semelhante a gzip -l file.gzou xz -l file.xz). Como isso pode ser feito usando bzip2?

compression

2 respostas

  1. Best Answer

    Como mencionado nos comentários e na resposta vinculada, a única maneira confiável é descompactar (em um pipe) e fazer uma contagem de bytes.

    $ bzcat file.bz2 | wc -c
1234

    Como alternativa, encontre alguma ferramenta que faça isso sem o tubo supérfluo (pode ser um pouco mais eficiente):

    $ 7z t file.bz2
[...]
Everything is Ok
Size:       1234

    Isso também se aplica ao gzip e outros formatos. Embora gzip -l file.gzimprima um tamanho, pode ser um resultado errado. Quando o arquivo passa de um determinado tamanho, você obtém coisas como:

    $ gzip --list foobar.gz 
         compressed        uncompressed  ratio uncompressed_name
           97894400            58835168 -66.4% foobar
$ gzip --list foobar.gz 
         compressed        uncompressed  ratio uncompressed_name
         4796137936                   0   0.0% foobar

    Ou se o arquivo foi concatenado ou simplesmente não foi criado corretamente:

    $ truncate -s 1234 foobar
$ gzip foobar
$ cat foobar.gz foobar.gz > barfoo.gz
$ gzip -l barfoo.gz 
         compressed        uncompressed  ratio uncompressed_name
                 74                1234  96.0% barfoo
$ zcat barfoo.gz | wc -c
2468

    O tamanho não corresponde, então isso não é confiável de forma alguma.

    Às vezes você pode trapacear, dependendo do que está dentro do arquivo. Por exemplo, se for uma imagem compactada do sistema de arquivos, com um cabeçalho de metadados no início, você pode descompactar apenas esse cabeçalho e ler o tamanho total do sistema de arquivos a partir dele.

    $ truncate -s 1234M foobar.img
$ mkfs.ext2 foobar.img
$ bzip2 foobar.img
$ bzcat foobar.img.bz2 | head -c 1M > header.img
$ tune2fs -l header.img
tune2fs 1.45.4 (23-Sep-2019)
Filesystem volume name:   <none>
Last mounted on:          <not available>
Filesystem UUID:          95b64880-c4a7-4bea-9b63-6fdcc86d0914
[...]
Block count:              315904
Block size:               4096

    Então, extraindo uma pequena parte, você aprende que são 315.904 blocos de 4.096 bytes, o que resulta em 1.234 MiB.

    Não há garantia de que seria o tamanho real do arquivo compactado (pode ser maior ou menor), mas assumindo que não há coisas estranhas, é mais confiável do que gzip -lem qualquer caso.

    Por último, mas não menos importante, se esses arquivos forem criados por você, basta registrar o tamanho.

    • 6

  2. Essa pergunta já foi respondida aqui . Colado abaixo:

    Conforme observado por outros, o bzip2 não fornece muitas informações. Mas essa técnica funciona - você terá que descompactar o arquivo, mas não precisará gravar os dados descompactados no disco, o que pode ser uma solução "boa o suficiente" para você:

    $ ls -l foo.bz2
-rw-r--r-- 1 ~quack ~quack 2364418 Jul  4 11:15 foo.bz2

$ bzcat foo.bz2 | wc -c         # bzcat decompresses to stdout, wc -c counts bytes
2928640                         # number of bytes of decompressed data

    Você pode canalizar essa saída para outra coisa para fornecer uma forma legível por humanos:

    $ ls -lh foo.bz2
-rw-r--r-- 1 quack quack 2.3M Jul  4 11:15 foo.bz2

$ bzcat foo.bz2 | wc -c | perl -lne 'printf("%.2fM\n", $_/1024/1024)'
2.79M
    • 2

relate perguntas