使用坚果云WebDAV与rclone实现服务器代码自动备份

1. 为什么需要服务器代码自动备份方案

作为开发者，我们都经历过服务器硬盘损坏、误删代码、系统崩溃导致数据丢失的噩梦。特别是在团队协作环境中，代码备份更是至关重要。传统的本地Git备份虽然常用，但存在几个明显缺陷：

1. 无法应对服务器物理损坏的情况
2. 需要手动执行备份操作
3. 不包含非代码的重要配置文件
4. 无法保留完整目录结构

我曾在一次服务器迁移中丢失了三个月的开发成果，就是因为过度依赖本地Git而忽视了完整备份。这次教训让我意识到，需要一个自动化、可靠的远程备份方案。

2. 方案选型：为什么是坚果云WebDAV + rclone

2.1 备选方案对比

在确定最终方案前，我评估了多种备份方式：

2.2 为什么选择这个组合

坚果云WebDAV + rclone的组合脱颖而出，主要因为：

1. 无root权限要求：可以在普通用户目录下完成全部配置
2. 增量同步：只传输变化文件，节省时间和流量
3. 删除保护：通过--backup-dir保留被删除文件的历史版本
4. 自动化能力：可与cron结合实现定时备份
5. 免费方案可用：坚果云免费版提供1GB/月流量，适合代码备份

提示：坚果云的WebDAV功能需要单独开启，并且使用专用应用密码而非账户密码，这增加了安全性。

3. 详细配置步骤

3.1 准备坚果云WebDAV

1. 登录坚果云网页版，进入"账户信息"-"安全选项"
2. 找到"第三方应用管理"，添加新密码
3. 记录下生成的专用密码（只会显示一次）

3.2 用户级rclone安装

对于没有sudo权限的服务器用户，可以这样安装rclone：

bash复制# 创建用户bin目录（如果不存在）
mkdir -p ~/bin && cd /tmp

# 下载最新版rclone
curl -LO https://downloads.rclone.org/rclone-current-linux-amd64.zip

# 解压并安装
unzip -o rclone-current-linux-amd64.zip
cp rclone-*-linux-amd64/rclone ~/bin/
chmod +x ~/bin/rclone

# 添加到PATH
echo 'export PATH="$HOME/bin:$PATH"' >> ~/.bashrc
source ~/.bashrc

# 验证安装
rclone version

3.3 配置rclone连接坚果云

执行交互式配置命令：

bash复制rclone config

按照提示输入以下信息：

1. 选择"n"新建remote
2. 输入名称（如"jianguo"）
3. 选择存储类型为"webdav"
4. 输入URL：https://dav.jianguoyun.com/dav/
5. 供应商选择"other"
6. 输入坚果云账号（通常是邮箱）
7. 输入之前生成的专用密码
8. 跳过高级配置
9. 确认保存

测试连接是否成功：

bash复制rclone lsd jianguo:

应该能看到坚果云根目录下的文件列表。

4. 备份策略设计与实现

4.1 目录结构规划

合理的目录结构能避免后续管理混乱：

code复制坚果云根目录
└── backup/
    └── server1/          # 服务器别名
        ├── data/         # 实际备份内容
        │   └── user/
        │       └── projects/
        │           └── project1/
        └── _history/     # 历史版本
            └── project1/
                └── 2023-08-01/

4.2 完整备份脚本解析

将以下脚本保存为~/bin/backup_codes.sh：

bash复制#!/usr/bin/env bash
set -euo pipefail

# 基础配置
RCLONE="$HOME/bin/rclone"
REMOTE_ROOT="jianguo:/backup/server1"  # 修改为你的服务器别名
DATE="$(date +%F)"
LOG="$HOME/rclone_backup.log"

# 需要备份的目录数组
SOURCES=(
  "/data/user/projects/project1"
  "/data/user/projects/project2"
)

# 排除规则（按需修改）
EXCLUDES=(
  ".git/**"
  "node_modules/**"
  "*.log"
  "__pycache__/**"
  "*.tmp"
)

# 带日志记录的运行函数
run() {
  echo "[$(date '+%F %T')] CMD: $*" | tee -a "$LOG"
  "$@"
}

# 确保远程根目录存在
run "$RCLONE" mkdir "$REMOTE_ROOT" || true

for SRC in "${SOURCES[@]}"; do
  if [[ ! -d "$SRC" ]]; then
    echo "[$(date '+%F %T')] 跳过，不存在目录: $SRC" | tee -a "$LOG"
    continue
  fi

  NAME="$(basename "$SRC")"
  DST="$REMOTE_ROOT$SRC"  # 主备份路径
  HIS="$REMOTE_ROOT/_history/$NAME/$DATE"  # 历史版本路径

  # 逐层创建目录（减少409错误）
  run "$RCLONE" mkdir "$REMOTE_ROOT/data" || true
  run "$RCLONE" mkdir "$REMOTE_ROOT/data/user" || true
  run "$RCLONE" mkdir "$REMOTE_ROOT/data/user/projects" || true
  run "$RCLONE" mkdir "$DST" || true
  run "$RCLONE" mkdir "$REMOTE_ROOT/_history/$NAME" || true

  # 组装exclude参数
  EXCLUDE_ARGS=()
  for p in "${EXCLUDES[@]}"; do
    EXCLUDE_ARGS+=(--exclude "$p")
  done

  echo "[$(date '+%F %T')] 开始备份: $SRC -> $DST" | tee -a "$LOG"

  # 执行同步（核心命令）
  "$RCLONE" sync "$SRC" "$DST" \
    --backup-dir "$HIS" \
    --transfers 1 \
    --checkers 2 \
    --tpslimit 2 \
    --tpslimit-burst 1 \
    --bwlimit 6M \
    --timeout 30m \
    --contimeout 30s \
    --retries 20 \
    --retries-sleep 30s \
    --low-level-retries 20 \
    --progress \
    "${EXCLUDE_ARGS[@]}" \
    --log-file "$LOG" \
    --log-level INFO

  echo "[$(date '+%F %T')] 完成备份: $SRC" | tee -a "$LOG"
done

赋予执行权限：

bash复制chmod +x ~/bin/backup_codes.sh

4.3 参数调优建议

1. 带宽限制：--bwlimit 6M防止占满带宽
2. 并发控制：--transfers 1和--checkers 2避免触发限流
3. 重试机制：合理的--retries和--retries-sleep应对网络波动
4. 超时设置：--timeout 30m给大文件足够传输时间

5. 自动化与监控

5.1 设置cron定时任务

编辑当前用户的crontab：

bash复制crontab -e

添加以下内容，每天凌晨3点执行备份：

code复制0 3 * * * /home/user/bin/backup_codes.sh

验证cron任务：

bash复制crontab -l

5.2 日志监控方案

1. 简单监控：定期检查日志文件

   bash复制tail -n 50 ~/rclone_backup.log
   

2. 错误报警：通过邮件通知

   bash复制0 3 * * * /home/user/bin/backup_codes.sh 2>&1 | mail -s "Backup Report" your@email.com
   

3. 日志轮转：防止日志文件过大

   bash复制logrotate -f /etc/logrotate.d/backup_logs
   

6. 高级技巧与问题排查

6.1 常见错误及解决方案

6.2 性能优化技巧

1. 首次备份：可以在本地先打包压缩，再上传
2. 大量小文件：适当增加--transfers数量
3. 网络不稳定：使用--retries-sleep设置指数退避
4. 限流规避：错峰执行备份任务

6.3 恢复验证流程

定期测试备份可恢复性：

1. 创建测试目录

   bash复制mkdir -p ~/backup_test
   

2. 恢复最新版本

   bash复制rclone copy jianguo:/backup/server1/data/user/projects/project1 ~/backup_test
   

3. 恢复特定历史版本

   bash复制rclone copy jianguo:/backup/server1/_history/project1/2023-08-01 ~/backup_test/history
   

7. 安全注意事项

1. 密码安全：WebDAV密码不要写在脚本中，可以使用环境变量
2. 日志脱敏：分享日志前移除敏感路径信息
3. 权限控制：备份脚本应设置为700权限

   bash复制chmod 700 ~/bin/backup_codes.sh
   

4. 流量监控：坚果云免费版有1GB/月限制，注意不要超额

8. 方案扩展思路

1. 多服务器统一备份：为每台服务器设置不同别名
2. 备份状态监控：通过HTTP API上报备份状态
3. 邮件通知：备份完成后发送结果摘要
4. 数据库备份：结合mysqldump等工具扩展备份范围

这个方案在我管理的5台开发服务器上稳定运行了两年多，成功避免了多次潜在的数据丢失事故。特别是在团队协作环境中，它为所有成员提供了可靠的数据安全保障。