Linux使用shell脚本定时备份文件(夹)并删除一定日期之前的备份和日志

备份的原理

使用Linux的Cron程序定时执行该脚本从而达到备份和删除备份历史的目的。

主要参数

脚本主要需要设置参数有三个:

  • ORIGIN_FOLDER:要备份的目录,必须以\结尾
  • DES_FOLDER:备份文件存储路径(可以是网络路径,前提是必须要有权限管理该路径下的文件夹)
  • DAYS_AGO:该参数表示要删除多少天之前的备份(比如今天是2012年12月31日,那么20121221的文件不会被删除,20121220或比之小的文件夹将会被删除)

脚本

BackUpTask.shell

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
#!/bin/sh
#---------------------------------------------------------------------
# shell自动备份文件夹同时检查一定日期前的文件夹并删除
# 部署好本脚本后应当在linux中设置cron自动执行:
# 1、在linux的/etc/cron.d/目录下新建空文件
# 2、使用"crontab -e"编辑新的定时任务并保存
# 3、chkconfig crond on
# (注意:在cron模式下文件操作必须使用绝对路径)
# --by: Blademainer
#---------------------------------------------------------------------
#设置要备份的目录,多个文件夹以逗号分隔
ORIGIN_FOLDER=test,testlog
#设置备份文件的存储目录,可以是绝对路径
DES_FOLDER=bak
#设置删除多少天之前的备份
DAYS_AGO=10


#定义日期变量,时间戳的单位以秒为单位
SECOND=1
MINUTE=$((60*$SECOND))
HOUR=$((60*$MINUTE))
DAY=$((24*$HOUR))
WEEK=$((7*$DAY))

#time1=$(($(date +%s -d '2010-01-01') - $(date +%s -d '2009-01-01')));# 计算时间戳,以秒为单位
#time2=$(($(date +%s -d '2013-12-30 11:57:39')));# 计算时间戳,以秒为单位
#time3=$(($(date +%s -d "$(date +'%Y-%m-%d %H:%M:%S')")));# 计算时间戳,以秒为单位
#echo $time3
#echo $time2
#echo $(($time1/$DAY))

#当前日期的字符串表达形式
NOW=$(date +'%Y-%m-%d_%H%M%S')
#echo $NOW
#TEN_DAYS_AGO=$(($(date -d '-10 day' "+%Y%m%d%H%M%S")))
#echo 十天之前$TEN_DAYS_AGO

#计算当前时间的时间戳表达方法
TIME_NOW=$(($(date +%s -d "$(date +'%Y-%m-%d %H:%M:%S')")))

SECONDS_OF_DAYS_AGO=$(($DAYS_AGO * $DAY))
#计算指定天数前的时间戳表达方法
TIME_AGO=$(($TIME_NOW - $SECONDS_OF_DAYS_AGO))
#echo $TIME_NOW
#echo TIME_AGO============$TIME_AGO



#判断传入的日期是否在设置的日期之前
function isDaysBefore()
{
DATE=$(($(date +%s -d $1)))
if [[ $DATE < $TIME_AGO ]]
then
echo 1
else
echo 0
fi
}

#检验文件夹
if [ ! -d "$DES_FOLDER" ]; then
echo `mkdir $DES_FOLDER`
fi

DES_PATH=$DES_FOLDER/$NOW/
if [ ! -d "$DES_PATH" ]; then
echo `mkdir $DES_PATH`
fi

if [ ! -f "$DES_FOLDER/$NOW/$NOW.log" ]; then
echo `touch $DES_FOLDER/$NOW/$NOW.log`
fi

#拷贝文件夹
var=`echo "$ORIGIN_FOLDER"|awk -F ',' '{print $0}' | sed "s/,/ /g"`
for VAR_ORIGIN_FOLDER in $var; do
command=`cp -rf $VAR_ORIGIN_FOLDER $DES_PATH`
done


#删除备份文件夹
for FOLDER in `ls $DES_FOLDER`; do
#截取年月日
folder_date=`expr substr $FOLDER 1 10`
if [[ $(isDaysBefore $folder_date) == 1 ]]
then
echo `rm -fr $DES_FOLDER/$FOLDER`
fi
done