主页 / unix / 问题 / 560780
Accepted
Minz
Asked: 2020-01-08 01:37:34 +0800 CST

没有差异时删除文件

  • 772

我对 bash 完全陌生。我有一个需要执行以下操作的要求：

  • 遍历目录 A 和目录 B 的同名文件夹
  • 找到两个具有相同名称的文件并比较它们（我使用diff <(file1) <(sort file2)来比较文件）
  • 如果没有差异，则删除目录 A 中的文件
  • 如果有差异忽略并处理下一个匹配的文件对
  • 检查每个目录中的下一个文件夹并重复该过程，直到检查完所有匹配的文件夹。

因此，例如在目录 AI 中有文件夹 A 有 2 个文件（文件 1 和文件 2） 在目录 BI 中有文件夹 A 有 3 个文件（文件 1 和文件 2 和文件 3）

  • 两个目录中的 File1 相同 - 从目录 A 中删除
  • file2 存在差异 - 保留在两个目录中
  • file3 什么都不做 - 保留在目录 B

我使用的文件是 xml 文件。文件中标签的顺序有时会有所不同，但内容会完全相同，除非有我想要保留文件的附加内容。我不一定关心标签的顺序是否不同，我只想确保所有内容相同或不同。希望能提供更多的清晰度。

任何帮助将非常感激。

更新：

所以我设法做到了这一点，但是在运行脚本时，控制台中的输出是空白的。它应该列出已发现相同的文件并将其删除，我哪里出错了？

空白的

            declare -a my_array
            shopt -s globstar
            cd /mnt/c/filediff/validation/applications/

            for file in **; do
                if [ -d "$file" ]; then 
                    echo "$file is a directory, skipping."; 
                else
                    fileName=${file#*/}
                    if [[ -e /mnt/c/filediff/package/"$fileName" ]]; then
                        echo diff -q <(sort "$file") <(sort /mnt/c/filediff/package/"$fileName") && 
            my_array=("${my_array[@]}" "$fileName")
                        #rm /mnt/c/filediff/package/"$fileName" 
                    fi
                fi
            done
            echo -e '\nRemoved the following files -----------------------------------'
            for item in "${my_array[@]}"
            do
                echo "ITEM: *** $item ***"
            done
files file-comparison

2 个回答

  1. Best Answer

    你可以这样做：

    for file in /path/to/dirA/*; do
    fileName=${file##*/}
    diff -q <(sort "$file") <(sort /path/to/dirB/"$fileName") && 
    rm /path/to/dirB/"$fileName"
done

    这将遍历所有文件dirA，将每个文件保存为$file. 请注意，这$file将包括路径，因此它将是/path/to/dirA/file1而不仅仅是file1. 这就是为什么我们需要获取文件名的原因，我们通过删除最后一个斜杠 ( fileName=${file##*/}) 之前的所有内容来做到这一点。然后，我们将该文件与目录 B 中的同名文件进行静默比较，如果它们相同，则如果diff成功退出，则我们从目录 B 中删除该文件。&&意思是“仅当此命令为成功”，因此rm只有在文件相同时才会运行。

    要使其递归，假设您正在使用bash，请使用：

    shopt -s globstar
cd /path/to/dirA/
for file in **; do
    fileName=${file#*/}
    echo diff -q <(sort "$file") <(sort /path/to/dirB/"$fileName") && 
    rm /path/to/dirB/"$fileName"
done

    或者，更复杂一点，跳过目录和不存在的文件：

    shopt -s globstar
cd /path/to/dirA/
for file in **; do
    if [ -d "$file" ]; then 
        echo "$file is a directory, skipping."; 
    else
        fileName=${file#*/}
        if [[ -e /path/to/dirB/"$fileName" ]]; then
            echo diff -q <(sort "$file") <(sort /path/to/dirB/"$fileName") && 
            rm /path/to/dirB/"$fileName"
        fi
    fi
done
    • 1

  2. 使用专门设计的工具，例如fdupes通过计算每个文件的 md5 散列来实现此目的。我不会在这里给你详细说明，因为有一些警告，比如如果你两次指定同一个目录会丢失数据。例如，如果您同时指定 /home/和~/，则主目录中的文件将被列为它们自己的副本。如果您将 fdupes 设置为自动删除重复项，您最终将删除主目录中的所有文件！

    您可以做的最有用的事情可能是man fdupes在您的 CLI 中键入，它将向您显示包含所有选项的手册，因此您可以自己找到使用它的最佳方式，以及您想要使用哪些选项或不是。警告不是要害怕的事情，而是要注意的事情，这可能是训练自己使用此类工具的最佳方法，因为您会更好地理解它的作用。如果您“盲目地”复制粘贴答案中给出的建议，您将不会获得这种优势。

    如果您没有可用的工具，您的发行版很可能会在存储库中提供它，因为它是许多人选择的命令行工具。

    或者，您可能想考虑fslint，这显然是一个有用的基于 GUI 的工具。自己没试过，所以不能多说。

    • 0

相关问题