TL;DR 直接答案:跑 7B 模型(Qwen2.5-7B、Llama-3-8B 这一档),推理选 RTX 3090 或 RTX 4090(24GB)就够,LoRA 微调建议 24GB 起步;按量租 ¥1.3~2.5/时,一天跑 4 小时成本不到 ¥10。别碰 A100——那是给 70B 模型准备的,你多花 5 倍钱用不满。
先搞清你要干嘛:推理还是微调
这是选卡的第一分叉口,搞错了要么跑不动、要么白花钱:
- 纯推理(加载现成模型问答/写代码):7B 模型 FP16 约 15GB 显存,INT8 量化后约 9GB,INT4 只要 5GB 左右。一张 24GB 消费卡绰绰有余,甚至 16GB 的 4080 也能跑量化版。
- LoRA 微调:模型本体 + 优化器状态 + 梯度,7B 全量微调要 60GB+,但 LoRA/QLoRA 只训练 1% 参数,24GB 能跑 QLoRA(4bit 加载),32GB 以上更稳。
- 全量微调/预训练:学生党基本不需要,真要做直接看 A100/H100 页面。
三个档位,对号入座
① 极致省钱档(¥1.3/时上下):RTX 3090。24GB 显存,推理 7B 飞快,QLoRA 微调也能跑。缺点是老卡功耗高、部分新框架优化少。学生作业、课程设计、论文复现首选。
② 均衡档(¥2/时上下):RTX 4090。比 3090 快 60%~80%,跑推理每分钟能多出近一倍 token。赶 deadline 就选它,省下的时间比多花的那几毛钱值钱。
③ 显存焦虑档(¥3~5/时):RTX 5090 32GB。模型想跑 FP16 不量化、或者 batch 开大点刷吞吐量,32GB 给你安全感。
当前各平台实时价格
| 平台 | 价格 ⇅ | 24小时 | 库存 | 计费说明 | |
|---|---|---|---|---|---|
| Salad(美国)批量地板价北美
稳定性 62·C |
¥0.65/时当前监测较低价实时竞价 | ¥16/天 | 充足 | Salad 分布式云最低优先级档 $0.090/hr 折算(24G,共4档,高档更稳定) | 去租用 |
| 晨涧云长租划算中国
稳定性 98·A |
¥0.80/时实时按量 | ¥19/天 | 充足 | 晨涧云官网包日价 ¥19.25/天 ÷24 折算(NVIDIA GeForce RTX 3090 24G),按量小时价可能略高 | 去租用 |
| Vast.ai(美国)全球地板价北美
稳定性 98·A |
¥0.90/时▲42.9%实时竞价 | ¥22/天 | 充足 | Vast.ai 实时竞价最低价折算(RTX 3090,USD×7.2),随时变动 | 去租用 |
| 并行智算云3090低价中国
人工维护 |
¥0.99/时参考价·待核实按量 | ¥24/天 | 紧张 | 首充50元全返+后续5%返券;热门时段要抢 | 去租用 |
| 优云智算现金返利中国
稳定性 98·A |
¥1.19/时实时按量 | ¥29/天 | 充足 | 优云智算按量计费最低配置 ¥1.19/小时(包日/包月/抢占式更低价见官网,高校企业95折) | 去租用 |
| TensorDock(美国)全球低价北美
人工维护 |
¥1.44/时参考价·待核实按量 | ¥35/天 | 充足 | 官方起价 $0.20×7.2;$5起充按秒计费 | 去租用 |
| AutoDL生态最全中国
稳定性 94·A |
¥1.56/时实时按量 | ¥37/天 | 充足 | AutoDL 按量计费最低价 ¥1.56/时(官网市场 RTX 3090,空闲卡 4) | 去租用 |
| RunPod(美国)海外人气王北美
稳定性 61·C |
¥1.58/时实时竞价 | ¥38/天 | 充足 | RunPod 社区云最低价 $0.22/hr 折算(NVIDIA GeForce RTX 3090;Secure Cloud $0.50/hr) | 去租用 |
| 矩池云标价竞争力中国
稳定性 98·A |
¥1.85/时实时按量 | ¥44/天 | 充足 | 矩池云按分钟计费 ¥1.85/小时(0 区,官网明码标价) | 去租用 |
| Featurize自由度最高中国
人工维护 |
¥3.60/时参考价·待核实按量 | ¥86/天 | 紧张 | 20GB免费存储;可装任意库、完全root | 去租用 |
| 平台 | 价格 ⇅ | 24小时 | 库存 | 计费说明 | |
|---|---|---|---|---|---|
| Salad(美国)批量地板价北美
稳定性 62·C |
¥1.15/时当前监测较低价实时竞价 | ¥28/天 | 充足 | Salad 分布式云最低优先级档 $0.160/hr 折算(24G,共4档,高档更稳定) | 去租用 |
| PPIO 派欧云国内Spot低价中国
稳定性 59·D |
¥1.16/时实时竞价 | ¥28/天 | 充足 | PPIO 派欧云 GPU Spot 价 ¥1.16/小时(4090,默认1小时保护期,提前1小时中断通知) | 去租用 |
| 算家云当前低价中国
稳定性 98·A |
¥1.24/时实时按量 | ¥30/天 | 充足 | 算家云官网标价 ¥1.24/小时(原价 ¥2.08,长期租用另有折上折) | 去租用 |
| 晨涧云长租划算中国
稳定性 98·A |
¥1.38/时实时按量 | ¥33/天 | 充足 | 晨涧云官网包日价 ¥33.01/天 ÷24 折算(NVIDIA GeForce RTX 4090 24G),按量小时价可能略高 | 去租用 |
| Vast.ai(美国)全球地板价北美
稳定性 98·A |
¥1.74/时▲100.0%实时竞价 | ¥42/天 | 充足 | Vast.ai 实时竞价最低价折算(RTX 4090,USD×7.2),随时变动 | 去租用 |
| 优云智算现金返利中国
稳定性 98·A |
¥1.92/时实时按量 | ¥46/天 | 充足 | 优云智算按量计费最低配置 ¥1.92/小时(包日/包月/抢占式更低价见官网,高校企业95折) | 去租用 |
| AutoDL生态最全中国
稳定性 94·A |
¥1.98/时实时按量 | ¥48/天 | 充足 | AutoDL 按量计费最低价 ¥1.98/时(官网市场 RTX 4090,空闲卡 43) | 去租用 |
| 蓝耘中国
人工维护 |
¥2.00/时参考价·待核实按量 | ¥48/天 | 充足 | 实测稳定性较好,响应较快 | 去租用 |
| 矩池云标价竞争力中国
稳定性 98·A |
¥2.20/时实时按量 | ¥53/天 | 充足 | 矩池云按分钟计费 ¥2.20/小时(11 区,官网明码标价) | 去租用 |
| RunPod(美国)海外人气王北美
稳定性 61·C |
¥2.45/时实时竞价 | ¥59/天 | 充足 | RunPod 社区云最低价 $0.34/hr 折算(NVIDIA GeForce RTX 4090;Secure Cloud $0.89/hr) | 去租用 |
| 智星云中国
人工维护 |
¥2.50/时参考价·待核实按量 | ¥60/天 | 充足 | 资源结构均衡,高峰期可能排队 | 去租用 |
| TensorDock(美国)全球低价北美
人工维护 |
¥2.52/时参考价·待核实按量 | ¥60/天 | 充足 | 官方起价 $0.35×7.2(2026-10核实);低价机$0.25起但常断货;第三方机房 | 去租用 |
算一笔账:跑一次课程作业多少钱
假设你的任务是「用 Qwen-7B 微调一个课程问答机器人」:环境安装 20 分钟 + 数据处理 30 分钟 + QLoRA 训练 2 小时 + 调试推理 1 小时 ≈ 4 小时。按 3090 约 ¥1.4/时算,总成本 ¥5.6,一杯蜜雪冰城的钱。用竞价/闲时实例还能再砍 30%。
避坑三条
- 先选「按量」别包月:学生任务都是脉冲式的,包月机器 90% 时间在空转。跑完立刻释放实例。
- 数据先传网盘/OSS:实例释放后系统盘清空,数据集和 checkpoint 一定存到平台云盘或对象存储。
- 竞价实例要会 checkpoint:闲时价最低但可能被回收,训练脚本里加定期保存,被踢了重开接着练。
还不知道选哪张?用本站免费选型工具:选任务类型,自动推荐卡型和当日最低价平台。价格每小时自动更新,部分链接含推广返佣,不影响排序。
