数据备份与rsync实战：增量同步、远程备份、3-2-1策略

生信数据备份遵循 3-2-1 原则：

3 份副本（原始+2份备份）
2 种介质（本地硬盘+远程）
1 份异地（不同物理位置）

1. rsync——增量同步利器#

1
# 基础同步（本地→远程）
2
rsync -avzP /opt/bioinfo/results/ user@192.168.1.100:/backup/results/
3

4
# 参数说明：
5
# -a: 归档模式（保留权限、时间戳）
6
# -v: 详细输出
7
# -z: 传输时压缩
8
# -P: --partial --progress（断点续传+显示进度）
9
# --delete: 删除目标端多余文件（慎用！）

2. 完整备份脚本#

1
#!/bin/bash
2
set -euo pipefail
3

4
BACKUP_SRC="/opt/bioinfo"
5
BACKUP_DST="/mnt/backup/bioinfo_$(date +%Y%m%d)"
6
REMOTE="user@nas-server:/backup/"
7
LOG="/var/log/backup.log"
8

9
log() { echo "[$(date)] $*" | tee -a "$LOG"; }
10

11
log "=== Backup started ==="
12

13
# 本地完整备份（硬链接节省空间）
14
rsync -avzP --link-dest=/mnt/backup/bioinfo_latest \
15
    "$BACKUP_SRC/" "$BACKUP_DST/" >> "$LOG" 2>&1
16

17
# 更新latest链接
18
rm -f /mnt/backup/bioinfo_latest
19
ln -s "$BACKUP_DST" /mnt/backup/bioinfo_latest
20

21
# 远程同步（仅同步变化）
22
rsync -avzP --delete "$BACKUP_SRC/" "$REMOTE" >> "$LOG" 2>&1
23

24
log "=== Backup completed ==="

3. tar打包压缩#

1
# 打包+压缩（多线程）
2
tar -I pigz -cf project_backup_$(date +%Y%m%d).tar.gz /opt/bioinfo/project/
3

4
# 排除某些目录
5
tar -czf backup.tar.gz \
6
    --exclude='tmp' \
7
    --exclude='*.fastq' \
8
    /opt/bioinfo/

4. crontab定时备份#

1
# 每天凌晨2点执行
2
0 2 * * * /opt/scripts/backup.sh
3

4
# 每周日凌晨3点清理旧备份（保留最近4周）
5
0 3 * * 0 find /mnt/backup/ -name "bioinfo_*" -mtime +28 -exec rm -rf {} \;

5. 踩坑#

rsync —delete先干跑：加--dry-run看看会删什么
备份要验证：定期 rsync -avnc对比源和目标是否一致
别把备份和原始放同一块硬盘：硬盘坏了全没了

本文于 2025-09-15 实测。

1. rsync——增量同步利器#

2. 完整备份脚本#

3. tar打包压缩#

4. crontab定时备份#

5. 踩坑#

文章分享

文章目录