大备份分卷传输:按顺序合并,并同时核对分卷与整包哈希
单个备份太大、传输工具限制文件大小或网络经常中断时,可以把已经生成的固定备份切成若干分卷。分卷只是传输手段,不会让一个损坏或不一致的数据库备份变成可恢复数据,也不会自动加密。先确认原备份可用,再拆分与核验。
准备固定源文件和全新目录
本文使用Linux的GNU split、sha256sum和cat,其他系统的同名命令选项可能不同。假设备份是/backup/site.tar.gz,打包或数据库导出已经完成,不再写入;若源文件仍变化,应等它完成后再开始。
准备新的私有传输目录,确认空间能同时保存原包、分卷及接收端合并文件。以下命令分步执行,任一步失败就停止;目录已存在时换新名称,不在混有旧分卷的目录继续:
mkdir -m 700 /backup/transfer-20261115
cd /backup/transfer-20261115
sha256sum /backup/site.tar.gz > source-original.sha256
split -b 1G -d -a 6 /backup/site.tar.gz part-
这里每卷上限是1GiB,数字后缀固定6位,方便按名称顺序拼接;末卷较小是正常情况。若工具单文件限制小于这个值,应提前选择更小分卷,而不是传到一半才更改规则。
给每卷建立清单
export LC_ALL=C
sha256sum part-[0-9][0-9][0-9][0-9][0-9][0-9] > parts.sha256
ls -lh part-*
保留分卷数量、每卷大小和parts.sha256。通过已核验身份的SFTP或其他受控通道传输所有分卷及清单;不要上传到网站公开目录。完整原包的SHA256值应单独记录,或者通过可信渠道与接收人核对,不能只相信一个可能同样被改过的清单。
分卷失败后不要在原目录补着继续,避免混入旧尾卷。传输失败时,可以只重传失败卷,但必须来自同一份固定源文件。源包重新生成过,即使文件名一样,也应重新分卷、重新建立清单。
接收端先查每卷,再合并
把所有卷放进接收端全新私有目录,检查文件名与清单一致,不能少卷、重复更名或夹杂另一份备份。然后在该目录执行:
export LC_ALL=C
sha256sum -c parts.sha256
cat part-[0-9][0-9][0-9][0-9][0-9][0-9] > site-restored.tar.gz
sha256sum site-restored.tar.gz
只有第一条全部通过才合并。固定宽度数字后缀可避免part-1、part-10、part-2这类顺序问题;LC_ALL=C保持一致排序。目标文件名不匹配part-模式,避免把输出文件本身误拼进去。目标已经存在时改新名称,不覆盖正在验证或准备恢复的文件。
最终SHA256必须与发送端原包的值完全一致。分卷全部通过不代表你传输了完整清单,整包哈希是另一层检查;多出旧卷、少了末卷或顺序错误,通常都会在整包核验时暴露。
错误发生在哪一步,就修哪一步
| 现象 | 处理方向 |
|---|---|
| 某卷哈希失败或缺失 | 核对同名文件版本,重传该卷后重新检查。 |
| 每卷通过,整包不一致 | 核对原包身份、分卷清单完整性、额外文件和合并顺序。 |
| 整包一致,但gzip或数据库恢复失败 | 问题可能在源备份生成阶段,不能继续反复传输解决。 |
| 合并报空间不足 | 保留原分卷,清楚记录失败输出,换足够空间重新合并。 |
哈希一致后,压缩包还应做格式检查并解到新目录;数据库备份应进入隔离恢复验证。不要直接覆盖生产数据。相关步骤见SHA256核对、目录归档恢复及压缩包损坏定位。源包和分卷至少保留到恢复演练完成,再按既定备份保留规则清理。