数据放哪
训练丢数据,通常不是「没备份」,而是搞不清:哪块盘跟实例同生共死、哪块能留下来。
#数据命运矩阵
| 存储 | 典型用途 | 实例释放后 | 同区域? |
|---|---|---|---|
| 系统盘(Root) | OS、环境、代码、默认家目录 | 删除,不可恢复 | 随实例 |
| 本地/临时盘(Ephemeral) | 缓存、中间结果、大读写 | 清除,不可恢复 | 随实例 |
| 创建时附加数据盘 | 大数据集、检查点(若该配置支持) | 按产品规则删除/回收;不要假设能恢复 | 须同区域 |
| 我的云盘(对象存储) | 需跨实例保留的文件 | 不随实例释放自动当快照;看额度/套餐 | 侧栏「文件与存储」出现时可用 |
| 临时传输(对象存储) | 短时传文件 | 有保留时长;勿当唯一备份 | 同上;不是挂载到实例的块设备 |
平台不提供释放后默认快照恢复。没有「释放错了再找回」。
#决策:这份文件放哪
| 数据 | 放哪 |
|---|---|
| 环境、pip 包、小代码 | 系统盘即可 |
| 可重新下载的数据集缓存 | 本地/临时盘或系统盘均可;释放前不必死保 |
| 训练检查点、标注结果、不可再得的产物 | 定期同步到本机或同区域云盘;不要只留一份在系统盘/临时盘 |
| 多机要共享的数据 | 用同区域云盘/临时传输等控制台能力;不要假设跨区域自动同步 |
#系统盘
- - 固定系统盘配置:容量锁定为配置上的系统盘大小(常见 100 GB;个别大规格更大)。
- - 可调系统盘:创建时选择大小(控制台常见约 50~4096 GB,默认常见 100 GB)。
- - 根分区设备名因镜像而异,上机用下面命令确认。
lsblk -o NAME,SIZE,TYPE,FSTYPE,MOUNTPOINT
df -hT /
#本地/临时存储
配置详情可能显示很大的 ephemeral 容量(数百 GB~数十 TB 量级)。这是规格附带的本地介质元数据,不保证固定挂载为 /mnt/ephemeral。
lsblk -o NAME,SIZE,TYPE,FSTYPE,MOUNTPOINT
df -hT
findmnt -t ext4,xfs,btrfs
未挂载的大容量块设备,格式化前务必确认不是系统盘。
#附加盘与 /data
部分配置支持创建时附加数据盘。就绪后,部分规格会把附加盘格式化为 ext4 并挂到 /data(可能有短暂延迟)。
findmnt /data || echo "no /data yet"
df -hT /data 2>/dev/null
ls -la /data 2>/dev/null
不支持附加盘的配置,页面/API 会直接拒绝该选项。云盘从控制台附加后,同样以机内 lsblk/findmnt 为准。
详见 磁盘与挂载。
#区域与搬数据
实例本地盘绑定创建时的区域,不能「迁移」到另一区域代码。换区域 = 新实例 + 自行拷贝。
临时传输/云盘是对象存储,不会自动出现在某区域实例磁盘上;见 临时传输与云盘。
#释放前最小备份流程
df -h
du -xh --max-depth=2 /root /data 2>/dev/null | sort -h | tail
- 1. 列出必须带走的路径与大小
- 2.
scp/rsync到本机或同区域持久位置并抽样校验 - 3. 再在控制台释放
rsync -avzP -e "ssh -i ~/.ssh/id_ed25519 -p <端口>" \
root@<IP>:/root/checkpoints/ ./checkpoints-backup/