训练 checkpoint 怎么存、要存多少:存储与带宽规划口径
checkpoint 怎么存:单次快照约 = 参数量 × 精度字节 × 优化器倍数,另加并行副本(2026-09-28 口径)。
三条适用条件(含什么情况下不适用)
- 大模型长任务 → 必须先算快照与写入带宽。租期按台月走时,存储与带宽到底含不含在台月价里,直接决定真实成本,参照 H100 一年期 9.3 万元/台/月(32 台,IB 组网,2026-09-28 确认)。不适用:只需跑一次性推理、不做中间保存的任务,存储规划可以简化。
- 多机并行训练 → 快照要算并行副本。切分越细,叠加副本越多,容量要按倍数留余量。不适用:单机单卡的小任务,副本开销可以忽略,见 单机 vs 多机。
- 需要中断续训 → 恢复时间也要算。恢复时间 = 读取数据量 ÷ 读带宽,直接决定停多久。不适用:可从头重跑且耗时不长的任务,不必为恢复速度多花钱,见 SLA 与可用性。
五列表:存储与带宽要逐项问清
| 要算的项 | 粗算口径 | 影响什么 | 该要的凭证 | 当期参照 |
|---|---|---|---|---|
| 单次快照大小 | 参数量 × 精度字节 × 优化器状态倍数 | 占用容量 | 框架与精度的书面说明 | 通用工程口径,不是报价项 |
| 并行副本 | 按切分方式叠加 | 容量倍数与恢复耗时 | 并行策略说明 | 见 NVLink 与 IB |
| 写入带宽 | 快照大小 ÷ 期望保存时长 | 保存时是否停顿 | 带宽实测与组网口径 | 见 多节点带宽 |
| 恢复时间 | 读取数据量 ÷ 读带宽 | 中断后多久能续训 | 恢复演练记录 | 见 SLA 与可用性 |
| 存储是否含在台月价 | 容量、类型、超额计费 | 总支出是否溢出 | 合同费用边界条款 | H100 一年期 9.3 万元/台/月(32 台,2026-09-28) |
含税口径:报价是否含税以书面报价单为准,可开增值税专用发票。
存储与带宽为通用工程口径,金额仅引用事实核已登记档位(确认日期 2026-09-28);是否含在租用口径内以当日书面确认为准。
四个买方问题
checkpoint 到底要留多少空间?
结论:先算单次快照,再乘以保留份数(含并行副本),不要拿别人的数字直接套。该要的凭证:框架与精度书面说明 + 并行策略,见 签字前清单。
本地盘还是网络存储?
结论:高频临时快照放本地盘,长期归档与多机共享放网络存储;两者都要写清容量与性能边界。该要的凭证:存储类型与 IOPS 口径,见 集群网络与存储。
保存会不会拖慢训练?
结论:会,写入会占带宽并短暂占资源;把保存间隔与写入时长算进有效训练时间,否则效率会被低估,见 利用率与成本。该要的凭证:保存前后吞吐对比记录。
退租后快照归谁、能留多久?
结论:租期内归你方,到期后的取回时限、保留期与销毁凭证必须写;不写就是默认到期清空。该要的凭证:取回窗口与销毁凭证样例,见 数据传输。
反例:这三种会亏
- 只算一份快照容量:加上并行副本与多份保留后容量翻倍,最后只能加钱扩容。
- 假设存储与带宽天然包含在台月价里:合同没写,账单上就多出一项,真实单价高于 9.3 万元/台/月 的名义值,见 隐性成本。
- 高频保存却不升带宽:保存停顿反复吃掉训练时间,GPU 在等存储,见 利用率与成本。
价格确认日期 2026-09-28,货源确认日期 2026-10-11。本页最后更新 2026-10-17;存储与带宽口径以当日书面确认为准。
下一步
告诉我们三个数:模型参数量、保存间隔、要保留几份;我们给出存储容量、写入带宽与租期口径。提交 GPU 租赁需求,数据进出见 数据传输。
存储与带宽口径以当次书面确认为准。电话 18601021890 · 18911222965 微信 66212664
