Rclone 备份本地到云盘

1
#!/bin/bash
2
set -euo pipefail
3
umask 022
4

5
SCRIPT_DIR="$(cd -- "$(dirname -- "${BASH_SOURCE[0]}")" >/dev/null 2>&1 && pwd)"
6

7
# ===== 固定参数开始（按需修改）=====
8
LOCAL_DIR="/path/to/source" # 本地要同步的目录（源）
9
REMOTE_PATH="myremote:/path/in/remote" # 远端路径：remote 名称:目标子路径（目的地）
10
BW_SCHEDULE="00:00,12M 08:00,5M 23:00,12M" # 带宽时间表（本地时间循环）：08:00–23:00 5M/s，其余 12M/s
11
TRANSFERS=4 # 并发文件传输数，建议 3–4（适中减轻限速/429）
12
CHECKERS=8 # 校验/列目录并发数，建议为 TRANSFERS 的 1.5–2 倍
13
LOG_DIR="/path/to/logs/rclone_sync" # 日志目录（建议 SSD/缓存盘）
14
SIMULATE=true # 模拟运行：true/false（仅打印不改动）
15
MAX_LOG_FILES=30 # 日志数量上限；0 表示不限制
16
LOG_FILE_OWNER="nobody" # 日志文件属主（便于 SMB/Unraid 客户端读取）；留空不更改
17
LOG_FILE_GROUP="users" # 日志文件属组；留空不更改
18
BUFFER_SIZE="32M" # 传输缓冲区：常用 16M 或 32M（更大更占内存）
19
RETRIES=6 # 高层重试次数（处理 HTTP 429/网络抖动）
20
RETRIES_SLEEP="10s" # 高层重试间隔
21
LOW_LEVEL_RETRIES=20 # 底层分片/连接重试次数
22
TIMEOUT="5m" # 单次 I/O 超时（读写）
23
CONN_TIMEOUT="20s" # 连接建立超时
24
TPSLIMIT=8 # 每秒请求上限（防 429）
25
TPSLIMIT_BURST=16 # 瞬时突发上限
26
MODIFY_WINDOW="2s" # 修改时间容差；若仍异常可改用 --size-only
27
# ===== 固定参数结束 =====
28
mkdir -p "${LOG_DIR}"
29

30
if ! command -v rclone >/dev/null 2>&1; then
31
  echo "[ERROR] 未找到 rclone，请先安装与配置 rclone。" >&2
32
  exit 1
33
fi
34

35
:
36

37
if [[ ! -d "${LOCAL_DIR}" ]]; then
38
  echo "[ERROR] 本地目录不存在：${LOCAL_DIR}" >&2
39
  exit 3
40
fi
41

42
# 带宽时间表（本地时间，按日循环）和性能参数已固定在上方
43

44
TIMESTAMP="$(date +"%Y%m%d_%H%M%S")"
45
LOG_FILE="${LOG_DIR}/rclone_sync_${TIMESTAMP}.log"
46

47
echo "[INFO] 开始同步"
48
echo "[INFO] 本地: ${LOCAL_DIR}"
49
echo "[INFO] 远端: ${REMOTE_PATH}"
50
echo "[INFO] 带宽时间表: ${BW_SCHEDULE}"
51
echo "[INFO] 日志: ${LOG_FILE}"
52
if [[ "${SIMULATE}" == "true" ]]; then
53
  echo "[INFO] 模拟运行: 已开启 (--dry-run)"
54
else
55
  echo "[INFO] 模拟运行: 关闭"
56
fi
57

58
# 说明：
59
# --delete-after    默认行为由 sync 决定（保持远端与本地一致），如需先传后删可显式加此项
60
# --stats-one-line  更简洁的进度输出
61
# --log-level INFO  常用日志级别（DEBUG 更详细）
62
# 如使用特定后端（如 drive/s3），可追加相应优化参数（例如 --drive-chunk-size 等）。
63

64
# 预创建日志并设置权限/属主（若配置了 LOG_FILE_OWNER/GROUP 且系统存在）
65
touch "${LOG_FILE}" || true
66
chmod 644 "${LOG_FILE}" || true
67
chmod 755 "${LOG_DIR}" || true
68
if id -u "${LOG_FILE_OWNER}" >/dev/null 2>&1 && getent group "${LOG_FILE_GROUP}" >/dev/null 2>&1; then
69
  chown "${LOG_FILE_OWNER}:${LOG_FILE_GROUP}" "${LOG_FILE}" || true
70
fi
71

72
CMD=(
73
  rclone sync
74
  "${LOCAL_DIR}" "${REMOTE_PATH}"
75
  --bwlimit "${BW_SCHEDULE}"
76
  --transfers "${TRANSFERS}"
77
  --checkers "${CHECKERS}"
78
  --log-file "${LOG_FILE}"
79
  --log-level INFO
80
  --stats 30s
81
  --stats-one-line
82
  --buffer-size "${BUFFER_SIZE}"
83
  --retries "${RETRIES}"
84
  --retries-sleep "${RETRIES_SLEEP}"
85
  --low-level-retries "${LOW_LEVEL_RETRIES}"
86
  --timeout "${TIMEOUT}"
87
  --contimeout "${CONN_TIMEOUT}"
88
  --tpslimit "${TPSLIMIT}"
89
  --tpslimit-burst "${TPSLIMIT_BURST}"
90
  --modify-window "${MODIFY_WINDOW}"
91
)
92

93
if [[ "${SIMULATE}" == "true" ]]; then
94
  CMD+=(--dry-run)
95
fi
96

97
"${CMD[@]}"
98

99
EXIT_CODE=$?
100

101
if [[ ${EXIT_CODE} -eq 0 ]]; then
102
  echo "[INFO] 同步完成"
103
else
104
  echo "[ERROR] 同步失败，退出码：${EXIT_CODE}" >&2
105
fi
106

107
# 按数量上限清理旧日志
108
if [[ -n "${LOG_DIR}" && -d "${LOG_DIR}" && ${MAX_LOG_FILES} -gt 0 ]]; then
109
  # 按时间倒序列出匹配日志文件
110
  mapfile -t _log_files < <(ls -1t "${LOG_DIR}"/rclone_sync_*.log 2>/dev/null || true)
111
  total_logs=${#_log_files[@]}
112
  if [[ ${total_logs} -gt ${MAX_LOG_FILES} ]]; then
113
    to_delete=$(( total_logs - MAX_LOG_FILES ))
114
    echo "[INFO] 日志数量 ${total_logs} 超过上限 ${MAX_LOG_FILES}，将删除最旧的 ${to_delete} 个日志"
115
    # 从时间倒序数组的尾部开始删除（即最旧）
116
    for (( i=total_logs-1; i>=MAX_LOG_FILES; i-- )); do
117
      rm -f -- "${_log_files[$i]}" || true
118
    done
119
  fi
120
fi
121

122
exit ${EXIT_CODE}