AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 437431
Accepted
FreeSoftwareServers
FreeSoftwareServers
Asked: 2018-04-13 19:31:29 +0800 CST2018-04-13 19:31:29 +0800 CST 2018-04-13 19:31:29 +0800 CST

bash - Encontre todos os arquivos com o mesmo nome, independentemente da extensão

  • 772

Estou mesclando duas bibliotecas de filmes e estou procurando "desduplicar" manualmente por meio de script bash.

Aqui está o meu processo de pensamento até agora:

  • Encontre todos os arquivos com o mesmo nome, independentemente da extensão
  • Excluir arquivo menor (tenho armazenamento por dias! e prefiro qualidade!)

Eu poderia construir sobre isso, então se eu puder de alguma forma separar a parte deletada, posso construir sobre ela. Embora eu pudesse usar o ffmpeg para inspecionar o vídeo e escolher o melhor, mas acho que tamanho maior = melhor opção e mais simples de codificar.

Eu postei sobre Software Rec , mas não consegui o que queria, então percebi que o bash é minha melhor aposta, mas meu conhecimento de "encontrar" é limitado e a maioria das respostas que estou encontrando são muito complicadas, acho que isso deve ser um simples coisa.

Por exemplo: Encontre arquivos com o mesmo nome, mas conteúdo diferente?

bash find
  • 2 2 respostas
  • 7476 Views

2 respostas

  • Voted
  1. Best Answer
    Harry
    2018-04-13T20:21:51+08:002018-04-13T20:21:51+08:00

    Esta é uma boa maneira que escrevi para apenas encontrar os arquivos repetidos ignorando a extensão:

    find . -exec bash -c 'basename "$0" ".${0##*.}"' {} \; | sort | uniq --repeated
    

    Em seguida, envolvi-o neste loop para encontrar o menor dos dois arquivos para cada um:

    for i in $(find . -exec bash -c 'basename "$0" ".${0##*.}"' {} \; | sort | uniq --repeated); do find . -name "$i*" -printf '%s %p\n' | sort -n | head -1 | cut -d ' ' -f 2-; done
    

    Por fim, mais um loop para (interativamente, rm -ipara que haja um prompt antes de cada um) excluir todos esses arquivos:

    for j in $(for i in $(find . -exec bash -c 'basename "$0" ".${0##*.}"' {} \; | sort | uniq --repeated); do find . -name "$i*" -printf '%s %p\n' | sort -n | head -1 | cut -d ' ' -f 2-; done); do rm -i "$j"; done
    

    Como isso envolve fazer dois finds em seu diretório, certamente existe uma maneira melhor. Mas isso deve funcionar para casos simples. Ele também assume que você está trabalhando no diretório atual, se quiser executar o comando em um diferente, basta alterar o .argumento para ambos os findcomandos.

    • 7
  2. FreeSoftwareServers
    2018-04-13T21:17:16+08:002018-04-13T21:17:16+08:00

    Como acabei fazendo isso devido ao meu problema de precisar excluir arquivos .srt.

    Encontre arquivos com o mesmo nome, mas extensão diferente:

    ls * | sed 's/.\{4\}$//' | sort | uniq -d
    

    Nota: Isso depende da extensão ser de 4 caracteres, por exemplo .XYZ, não funcionaria para mpeg, mas todos os meus filmes são mp4/mkv/m4v.

    Ignorar arquivos .srt:

    ls * |  awk '!/.srt/'  | sed 's/.\{4\}$//' | sort | uniq -d
    

    Postei um tópico separado sobre a comparação de tamanhos de arquivo, mas a resposta de Harry faz um ótimo trabalho, exceto que percebi que tinha problemas de .srt para mitigar.

    Compare dois tamanhos de arquivo e exclua o arquivo menor

    • 0

relate perguntas

  • exportar variáveis ​​​​env programaticamente, via stdout do comando [duplicado]

  • Problema estranho ao passar variáveis ​​do arquivo de texto

  • Enquanto a linha lê mantendo os espaços de escape?

  • ordem de substituição de processos `te` e `bash`

  • Execute um script muito lento até que seja bem-sucedido

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    ssh Não é possível negociar: "nenhuma cifra correspondente encontrada", está rejeitando o cbc

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    Como descarregar o módulo do kernel 'nvidia-drm'?

    • 13 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Wong Jia Hau ssh-add retorna com: "Erro ao conectar ao agente: nenhum arquivo ou diretório" 2018-08-24 23:28:13 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST
  • Martin Hope
    Bagas Sanjaya Por que o Linux usa LF como caractere de nova linha? 2017-12-20 05:48:21 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve