AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 1037098
Accepted
RunThor
RunThor
Asked: 2020-10-10 07:25:35 +0800 CST2020-10-10 07:25:35 +0800 CST 2020-10-10 07:25:35 +0800 CST

在 rsync 期间将时间戳添加到文件名

  • 772

我正在使用 rsync 将上传到外部系统的文件移动到内部系统。但是,我最近有人上传了两个同名的不同文件。这意味着他们有一个来自 Month1 的文件和一个来自 Month2 的文件,但两者都被命名为mylog.csv。

我目前正在使用 rsync 在目录之间移动它们,它会看到更改并覆盖之前的上传。

rsync -rutv --remove-source-files /external/intake/ /internal/intake/

外部路径确实包含其他子目录,即:

/external/intake/project/user/(additional directories they may build while uploading files)

我想做的是时间戳文件,因为它们在目录之间移动。这样,如果使用复制时间戳复制它们,我至少会看到其中有两个。如果我能得到类似20201009:0800-mylog.csvand的结果202001009:0810-mylog.csv。移动后的完整路径将类似于:

/external/intake/project/user/(possible additional directories)/$time-file.txt
linux rsync
  • 1 1 个回答
  • 785 Views

1 个回答

  • Voted
  1. Best Answer
    Carson
    2020-10-10T08:34:06+08:002020-10-10T08:34:06+08:00

    rsync 不支持和挂钩或重命名结构,但我认为你有几个选择。

    选项 1——纯 rsync

    如果您愿意稍微更改输出格式,则可以为每次移动创建一个新目录,并带有时间戳。当你有类似的东西

    /somedir
        /somedir/oldtime
            /somedir/oldtime/file1.txt
            /somedir/oldtime/file2.txt
    ...
    /external/intake
        /external/intake/file1.txt (NEWER)
    

    您可以通过执行类似rsync -rutv --remove-source-files /external/intake/ /somedir/newtime --link-dest="/somedir/oldtime" --compare-dest="/somedir/oldtime". 由此产生的结构将是

    /somedir
        /somedir/oldtime
            /somedir/oldtime/file1.txt
            /somedir/oldtime/file2.txt
        /somedir/newtime
            /somedir/newtime/file1.txt
            /somedir/newtime/file2.txt -> /somedir/oldtime/file2.txt (LINKED)
    

    由于这些链接,您不必使用任何额外的磁盘,因此您可以避免快速爆炸大小,但这与您确切要求的有点不同。

    选项 2——重击

    这将完全按照您的要求执行,但不会使用 rsync。你会错过与 rdiff 相关的加速,但由于你并没有真正使用它,它应该不会影响任何事情。

    这是一个简短的 bash 脚本,应该按照您的需要执行。它应该完全按照您的要求复制行为。

    #! /bin/bash
    # command syntax: arg1 is source, arg2 is dest
    
    # Get timestamp in nice format
    dir=$(pwd)
    time=$(date +"%m-%d-%Y")
    # Loop through each file
    cd $1
    find . -type f |
    while read -r line
    do
        cd $dir
        echo "processing $line"
        # Check if it exisits
        if [ -f "$2/$line" ]; then
            # Copy over, but add timestamp
            base=$(basename "$line")
            fdir=$(dirname "$line")
            echo "cp $1/$line $2/$fdir/$time-$base"
            cp "$1/$line" "$2/$fdir/$time-$base"
        else
            # Copy over, no timestamp
            echo "cp $1/$line $2/$line"
            cp "$1/$line" "$2/$line"
        fi
    done
    
    # Remove source here if you really want
    

    它非常丑陋,但它有效。对于它的价值,这只是一个骨架。我在非常有限的情况下对其进行了测试,并确保它在使用前一直有效。

    • 0

相关问题

  • 多操作系统环境的首选电子邮件客户端

  • 你最喜欢的 Linux 发行版是什么?[关闭]

  • 更改 PHP 的默认配置设置?

  • 保护新的 Ubuntu 服务器 [关闭]

  • (软)Ubuntu 7.10 上的 RAID 6,我应该迁移到 8.10 吗?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve