Início / unix / Perguntas / 557632
Accepted
Andrej
Asked: 2019-12-17 22:41:09 +0800 CST

Divida o arquivo em n arquivos usando csplit (ou ferramenta similar)

  • 772

Eu tenho um arquivo enorme com o seguinte padrão:

ABC
line 1
line 2
line 3
ABC
line 1
line 2
ABC
line1
ABC
line 1
line 3

Usando csplita ferramenta, consigo dividir o arquivo acima de acordo com o /ABC/padrão em 4 subarquivos:

csplit -z input.txt /ABC/ {*}

Gostaria de saber como especificar manualmente o número de arquivos de saída desejados.

split csplit

1 respostas

  1. Best Answer

    Você poderia usar awk- não exatamente o que você queria, mas pode fazer o truque.

    Ideia: imprima n linhas em um arquivo de peça e, em seguida, procure a próxima ocorrência do seu padrão antes de criar um novo arquivo de peça.

    Desvantagens:

    • Se você tiver blocos grandes e apenas pular o início de tal bloco, alguns arquivos podem se tornar muito maiores que outros.
    • Arquivo original não removido (ou seja, o dobro do espaço necessário).
    • Conforme escrito, a linha de correspondência deve ser exatamente ABC(sem tolerância versus outras palavras na mesma linha - pode ser ajustada)
    • Funciona definindo o número de linhas em vez do número desejado de arquivos de saída (estimativa pelo número de linhas do arquivo de entrada)

    akw-roteiro

    BEGIN{
    outfile="part_"++i
    j=0
    }
{ 
    j++
    #block size set to at least 10 lines in this example
    #if threshold line number reached: search for next keyword,
    #then increase part file name counter and reset line threshold counter
    if ( j>=10 && $0 == "ABC" ) { outfile="part_"++i ; j=0 }
    print > outfile
}

    Executar via

    awk -f script.awk input.txt
    • 1

relate perguntas