如何保存：一周的每日备份，一个月的每周备份，一年的每月备份，之后每年备份

你严重过度设计了这个。很糟糕。

这是一些伪代码：

• 每天：
  • 备份，放入daily目录
  • 删除除最后 7 个daily备份之外的所有内容
• 每周：
  • 备份，放入weekly目录
  • 删除除最后 5 个weekly备份之外的所有内容
• 每个月：
  • 备份，放入monthly目录
  • 删除除最后 12 个monthly备份之外的所有内容
• 每年：
  • 备份，放入yearly目录

您必须实现的逻辑量大致相同，是吗？吻。

这看起来更容易：

s3cmd ls s3://backup-bucket/daily/ | \
    awk '$1 < "'$(date +%F -d '1 week ago')'" {print $4;}' | \
    xargs --no-run-if-empty s3cmd del

或者，按文件计数而不是年龄：

s3cmd ls s3://backup-bucket/daily/ | \
    awk '$1 != "DIR"' | \
    sort -r | \
    awk 'NR > 7 {print $4;}' | \
    xargs --no-run-if-empty s3cmd del

例如，如果您只想保留 8 次每日备份和 5 次每周（每个星期日）备份，它的工作方式如下：

for i in {0..7}; do ((keep[$(date +%Y%m%d -d "-$i day")]++)); done
for i in {0..4}; do ((keep[$(date +%Y%m%d -d "sunday-$((i+1)) week")]++)); done
echo ${!keep[@]}

截至今天（2014-11-10），这将输出：

20141012 20141019 20141026 20141102 20141103 20141104
20141105 20141106 20141107 20141108 20141109 20141110

作为留给您的练习，您只需删除名称未出现在keep-array 中的所有备份文件。

如果您还想保留 13 个每月备份（每个月的第一个星期日）和 6 个年度备份（每年的第一个星期日），事情会变得有点复杂：

for i in {0..7}; do ((keep[$(date +%Y%m%d -d "-$i day")]++)); done
for i in {0..4}; do ((keep[$(date +%Y%m%d -d "sunday-$((i+1)) week")]++)); done
for i in {0..12}; do
        DW=$(($(date +%-W)-$(date -d $(date -d "$(date +%Y-%m-15) -$i month" +%Y-%m-01) +%-W)))
        for (( AY=$(date -d "$(date +%Y-%m-15) -$i month" +%Y); AY < $(date +%Y); AY++ )); do
                ((DW+=$(date -d $AY-12-31 +%W)))
        done
        ((keep[$(date +%Y%m%d -d "sunday-$DW weeks")]++))
done
for i in {0..5}; do
        DW=$(date +%-W)
        for (( AY=$(($(date +%Y)-i)); AY < $(date +%Y); AY++ )); do
                ((DW+=$(date -d $AY-12-31 +%W)))
        done
        ((keep[$(date +%Y%m%d -d "sunday-$DW weeks")]++))
done
echo ${!keep[@]}

截至今天（2014-11-10），这将输出：

20090104 20100103 20110102 20120101 20130106 20131103
20131201 20140105 20140202 20140302 20140406 20140504
20140601 20140706 20140803 20140907 20141005 20141012
20141019 20141026 20141102 20141103 20141104 20141105
20141106 20141107 20141108 20141109 20141110

同上，只需删除该数组中未找到的所有备份文件即可。

我最近遇到了同样的问题。恕我直言，尝试编写一个 shell 脚本来做这件事是很痛苦的，而且使用带有内置函数（如集合、字典等）的高级语言编写一些可重用的逻辑要容易得多。一般的想法是采用配置来指示有多少文件您要保留的每个时期，然后决定是否应保留每个文件。

有一个相当流行的基于 python 的脚本，它看起来非常漂亮，并且有一些易于理解的源代码。再加上基于 python 而不是基于 shell 赋予了它跨平台的优势： https ://github.com/xolox/python-rotate-backups

正如评论中提到的，通常最好将管理备份的任务委托给备份管理软件。

但这是 bash 中根据您的要求删除旧备份的逻辑

#!/bin/sh

delete() {
    echo "Deleting $1"
}

DOW=$(date +%u)

if [ $DOW -eq 1 ]; then
    DATE_DAY=$(date -d "-28 days" +"%d")
    if [ $DATE_DAY -gt 7 ]; then
        DATE=$(date -d "-28 days" +"%Y-%m-%d")
        delete $DATE
    fi

    DATE_DAY=$(date -d "-364 days" +"%d")
    DATE_MONTH=$(date -d "-364 days" +"%m")
    if [ $DATE_DAY -le 7 ] && [ $DATE_MONTH -gt 1 ]; then
        DATE=$(date -d "-364 days" +"%Y-%m-%d")
        delete $DATE
    fi
else
    DATE=$(date -d "-7 days" +"%Y-%m-%d")
    delete $DATE
fi

显示运行 3520 天后哪些文件将保留的 PHP 代码

https://ideone.com/n2ymQy

Array
(
    [0] => 2005-01-03
    [1] => 2006-01-02
    [2] => 2007-01-01
    [3] => 2008-01-07
    [4] => 2009-01-05
    [5] => 2010-01-04
    [6] => 2011-01-03
    [7] => 2012-01-02
    [8] => 2013-01-07
    [9] => 2013-09-02
    [10] => 2013-10-07
    [11] => 2013-11-04
    [12] => 2013-12-02
    [13] => 2014-01-06
    [14] => 2014-02-03
    [15] => 2014-03-03
    [16] => 2014-04-07
    [17] => 2014-05-05
    [18] => 2014-06-02
    [19] => 2014-07-07
    [20] => 2014-07-28
    [21] => 2014-08-04
    [22] => 2014-08-11
    [23] => 2014-08-16
    [24] => 2014-08-17
    [25] => 2014-08-18
    [26] => 2014-08-19
    [27] => 2014-08-20
    [28] => 2014-08-21
    [29] => 2014-08-22
)

我也遇到过同样的问题。基本上需要运行每日完整备份的文件系统上的空间。

我写了一个只打印 rm -f 命令的脚本。

基本但对我来说已经足够了。易于适应/改进。

好处：

• 超级简单（基于find）
• 易于通过管道传输到文件中，或者只是复制/粘贴相关的输出部分以供交互使用
• 可能审查、执行并可能保留删除（清理）操作的痕迹

限制：

• 如果您的文件格式不同，您需要调整正则表达式
• 由于它仅基于文件计数，因此当月内没有运行或启动备份时，可能会有一个月的转变。
• 需要一些重写，因为它将在第二次运行时删除每周备份。所以只能使用一次。如果每月仅在同一天运行一次，则可能会起作用。

#!/bin/bash
# Build for this file format: 
# ./YYYYmmdd-HHhMM_container_name.tar.xz
# example: ./20210923-06h00_petrussewp.tar.xz

DELETE_DAILY_AFTER=30   # days
DELETE_WEEKLY_AFTER=180 # days (so keep only one monthly)

# List the backup sources to group them:
sourcename=$( ls -1 20*.tar.?z | sed -E 's/^[-h0-9]+_(.+)\.tar\.[gbx]z$/\1/' | sort | uniq )

for ctname in ${sourcename}
do
    echo "## ${ctname} backups :"
    for month in {01..12}
    do
        # Delete daily backups older than DELETE_DAILY_AFTER days.
        echo "# Obsolete daily backups for ${ctname} for the month ${month}:"
        find ./ -maxdepth 1 -type f -name "20??${month}*${ctname}*" -mtime +${DELETE_DAILY_AFTER} -printf "rm -f %p\n" | sort -n | awk 'NR % 7 != 1'
        # Delete all but the first matching backup of the month after DELETE_WEEKLY_AFTER days.
        echo "# Obsolete weekly backups for ${ctname} for the month ${month}:"
        find ./ -maxdepth 1 -type f -name "20??${month}*${ctname}*" -mtime +${DELETE_WEEKLY_AFTER} -printf "rm -f %p\n" | sort -n | awk 'NR % 7 == 1' | tail -n+2
    done
done

脚本输出示例：

## wekan-db backups :
# Obsolete daily backups for wekan-db for the month 01:
# Obsolete weekly backups for wekan-db for the month 01:
# Obsolete daily backups for wekan-db for the month 02:
rm -f ./20210206-06h00_wekan-db.tar.xz
rm -f ./20210207-06h00_wekan-db.tar.xz
rm -f ./20210208-06h00_wekan-db.tar.xz
rm -f ./20210209-06h00_wekan-db.tar.xz
rm -f ./20210210-06h00_wekan-db.tar.xz
rm -f ./20210211-06h00_wekan-db.tar.xz
rm -f ./20210213-06h00_wekan-db.tar.xz
rm -f ./20210214-06h00_wekan-db.tar.xz
rm -f ./20210215-06h00_wekan-db.tar.xz
rm -f ./20210216-06h00_wekan-db.tar.xz
rm -f ./20210217-06h00_wekan-db.tar.xz
rm -f ./20210218-06h00_wekan-db.tar.xz
rm -f ./20210220-06h00_wekan-db.tar.xz
rm -f ./20210221-06h00_wekan-db.tar.xz
rm -f ./20210222-06h00_wekan-db.tar.xz
rm -f ./20210223-06h00_wekan-db.tar.xz
rm -f ./20210224-06h00_wekan-db.tar.xz
rm -f ./20210225-06h00_wekan-db.tar.xz
rm -f ./20210227-06h00_wekan-db.tar.xz
rm -f ./20210228-06h00_wekan-db.tar.xz
# Obsolete weekly backups for wekan-db for the month 02:
rm -f ./20210212-06h00_wekan-db.tar.xz
rm -f ./20210219-06h00_wekan-db.tar.xz
rm -f ./20210226-06h00_wekan-db.tar.xz