AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / ubuntu / Perguntas / 979589
Accepted
user2413
user2413
Asked: 2017-11-24 10:27:24 +0800 CST2017-11-24 10:27:24 +0800 CST 2017-11-24 10:27:24 +0800 CST

Maneira CLI de compactar arquivos individuais atualmente na pasta compactada

  • 772

Eu tenho um arquivo compactado Data.zipque (se descompactado) contém muitos arquivos:

file_1.txt    
file_2.txt
...    
... 

Eu quero ter um comando CLI para transformar isso em uma nova pasta Data_zipped que contém os arquivos individuais Data.zipdescompactados:

Data_zipped/file_1.zip     
Data_zipped/file_2.zip
...
...

Mas o truque é que Data.zip contém tantos arquivos (e eles são tão grandes coletivamente) que não consigo primeiro descompactar Data.zip e depois compactar os arquivos individuais dentro dele de uma só vez: tudo tem que acontecer 'na hora':

Para todos os arquivos emData.zip/

  1. obtenha o i-ésimo arquivo
  2. comprimi-lo emname_of_that_file.zip
  3. armazene o arquivo compactado na nova pastaData_zipped

Como fazer isso usando a CLI?

Eu modifiquei o script super claro do @George para ajudar a explicar melhor a estrutura da pasta:

#!/bin/bash

#Name of zip file
filename=$1

# Check if valid zip file is passed
if [[ $(file "$filename" | grep -o "Zip archive data") =~ "Zip archive data" ]]
then    

        # List the contents of the zip file
        unzip -l "$filename" 

        # Get the number of files in zip file
        count=$(unzip -l "$filename" | awk '{count = $2 - 2} END {print count}')

        echo "$count"
    
fi

exit 0

Quando executo, recebo (eu uso um token Data.zip com apenas alguns arquivos, mas você entendeu):

./GU_script.sh Data.zip
Archive:  Data.zip
  Length      Date    Time    Name
---------  ---------- -----   ----
        0  2017-11-21 22:58   Data/
120166309  2017-11-21 14:58   Data/Level1_file.csv
120887829  2017-11-21 14:58   Data/Level1_other_file.csv
163772796  2017-11-21 14:59   Data/Level1_yet_other_file.csv
193519556  2017-11-21 14:59   Data/Level1_here_is_another_file.csv
153798779  2017-11-21 14:59   Data/Level1_so_many_files.csv
131918225  2017-11-21 14:59   Data/Level1_many_more_to_go.csv
---------                     -------
884063494                     7 files
5

Então, basicamente, eu gostaria que Level1_file.csvos outros arquivos fossem compactados individualmente (-> Level1_file.zip) e colocados em uma pasta.

Editar2;

Acabei combinando as respostas de @George e @David Foerster:

#!/bin/bash

#Name of zip file
filename="$1"

# Check if valid zip file is passed
if file "$filename" | grep -wq "Zip archive data";
then    

        #!/bin/bash
    src="$filename"
    dst=.

    LC_ALL=C unzip -l "$src" |
    sed -re '1,/^-{6}/d; /^-{6}/,$d; /\/$/d; s/^\s*(\S+\s+){3}//' |
    while IFS= read -r f; do
        out="${f##*/}"; out="$dst/${f%%/*}_zipped/${out%.*}.zip"
        if [ ! -d "${out%/*}" ]; then
        mkdir -p "${out%/*}" || break
        fi
        zip --copy "$src" --out "$out" "$f" || break
    done           

else
        echo "Invalid file type: \"zip\" file required"
        exit 1
fi
command-line
  • 4 4 respostas
  • 670 Views

4 respostas

  • Voted
  1. Best Answer
    David Foerster
    2017-11-25T03:05:06+08:002017-11-25T03:05:06+08:00

    Você pode usar a operação de “copiar” zip(1)e algumas alterações no caminho do arquivo. Tem a vantagem de copiar fluxos de dados compactados diretamente para o arquivo de destino sem descompactação intermitente.

    #!/bin/bash
    src=Data.zip
    dst=.
    
    LC_ALL=C unzip -l "$src" |
    sed -re '1,/^-{6}/d; /^-{6}/,$d; /\/$/d; s/^\s*(\S+\s+){3}//' |
    while read -r f; do
        out="${f##*/}"; out="$dst/${f%%/*}_zipped/${out%.*}.zip"
        if [ ! -d "${out%/*}" ]; then
            mkdir -p "${out%/*}" || return
        fi
        zip --copy "$src" --out "$out" "$f" <&- || return
    done
    

    Acrescentei LC_ALL=Cà invocação de unzipporque seu formato de saída parece um pouco esquisito em diferentes implementações e quero evitar, pelo menos, variantes de saída dependentes de localidade.

    • 5
  2. George Udosen
    2017-11-24T14:08:59+08:002017-11-24T14:08:59+08:00

    Isso deve ser capaz de fazer o que você deseja:

    #!/bin/bash
    
    #Name of zip file
    filename="$1"
    
    # Check if valid zip file is passed
    if file "$filename" | grep -wq "Zip archive data";
    then    
    
            # List the contents of the zip file
            unzip -l "$filename" 
    
            # Make the destination folder
            # after checking they don't exist
            if [ ! -d Data_zipped ]; 
            then
                    mkdir Data_zipped
            fi
            #make temporary folder
            #for extracted files
            tempdir=$(mktemp -d)            
            # Make temporary file to hold the filenames
            mysrc=$(mktemp)
    
            # Get the filesnames from the zip folder
            unzip -c Data.zip | cut -d" " -f3- | grep -E -o "[^Data/].*" | grep -Ev \(.zip\) | sed '/^\s*$/d' > "$mysrc"           
    
            while read -r var;
            do
                    unzip -j "$filename" "Data/$var" -d "$tempdir/"                    
                    # Get name of file from each read line
                    zip Data_zipped/"$var".zip "$tempdir/$var"
                    # remove the original file
                    rm -rf "$tempdir/${var:?}"
    
            done < "$mysrc"           
    
    else
            echo "Invalid file type: \"zip\" file required"
            exit 1
    fi
    

    Nota :

    Estrutura de árvore usada:

    Data
    ├── file_10.txt
    ├── file_1.txt
    ...
    
    • 3
  3. vidarlo
    2017-11-24T10:34:16+08:002017-11-24T10:34:16+08:00

    Você já pensou em procurar um sistema de arquivos fuse com suporte a zip ?

    Isso basicamente expõe o arquivo zip como um diretório regular, do qual qualquer aplicativo pode abrir e ler arquivos, enquanto a biblioteca fuse lida com os detalhes sujos de leitura e gravação do fluxo compactado.

    No Ubuntu você pode instalá-lo comsudo apt install fuse-zip

    Depois de instalar o fuse-zip, você pode montar um arquivo zip com fuse-zip /path/to/some.zip mnt/, onde mnt é um diretório vazio de sua escolha.

    Após terminar, desmonte-o com fusermount -u mnt/, onde mnt é o diretório onde você o montou.

    fuse-zip até criará o zip instantaneamente para você, se não existir.

    • 2
  4. muclux
    2017-11-24T10:40:31+08:002017-11-24T10:40:31+08:00

    você pode descompactar os arquivos contidos em Data.zip um por um: unzip Data.zip file1.txt e comprimi-los.

    mkdir Data_unzipped  
    for i in `seq 1 100`  # or whatever the number of your files is
    do
      unzip Data.zip file_${i}.txt
      zip Data_unzipped/file_${i}.zip file_${i}.txt
      rm file_${i}.txt
    done
    
    • 1

relate perguntas

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Existe um comando para listar todos os usuários? Também para adicionar, excluir, modificar usuários, no terminal?

    • 9 respostas
  • Marko Smith

    Como excluir um diretório não vazio no Terminal?

    • 4 respostas
  • Marko Smith

    Como descompactar um arquivo zip do Terminal?

    • 9 respostas
  • Marko Smith

    Como instalo um arquivo .deb por meio da linha de comando?

    • 11 respostas
  • Marko Smith

    Como instalo um arquivo .tar.gz (ou .tar.bz2)?

    • 14 respostas
  • Marko Smith

    Como listar todos os pacotes instalados

    • 24 respostas
  • Martin Hope
    Flimm Como posso usar o docker sem sudo? 2014-06-07 00:17:43 +0800 CST
  • Martin Hope
    led-Zepp Como faço para salvar a saída do terminal em um arquivo? 2014-02-15 11:49:07 +0800 CST
  • Martin Hope
    ubuntu-nerd Como descompactar um arquivo zip do Terminal? 2011-12-11 20:37:54 +0800 CST
  • Martin Hope
    TheXed Como instalo um arquivo .deb por meio da linha de comando? 2011-05-07 09:40:28 +0800 CST
  • Martin Hope
    Ivan Como listar todos os pacotes instalados 2010-12-17 18:08:49 +0800 CST
  • Martin Hope
    David Barry Como determino o tamanho total de um diretório (pasta) na linha de comando? 2010-08-06 10:20:23 +0800 CST
  • Martin Hope
    jfoucher "Os seguintes pacotes foram retidos:" Por que e como resolvo isso? 2010-08-01 13:59:22 +0800 CST
  • Martin Hope
    David Ashford Como os PPAs podem ser removidos? 2010-07-30 01:09:42 +0800 CST

Hot tag

10.10 10.04 gnome networking server command-line package-management software-recommendation sound xorg

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve