成本测算

TCO租用 / 自建 / API

同一份负载,租卡、自己买卡、直接调 API 三种方式每月各花多少钱?这页用同一套卡数与运行小时口径把三者摆在一起,并给出自建的盈亏平衡点——「跑多久才值得自己买」。

报价时间 2026-10-28 12:15 租金 2026-10-28 12:15 · 托管单价 2026-10-27 19:00
租用月成本$1,958.4NVIDIA RTX 4090 × 8 · 当月最低按需价
自建月成本$766.26折旧 $355.56 + 电费 $410.7
调 API 月成本$83.17DeepSeek V4 Flash · $0.08317/百万 token
自建盈亏平衡165 小时/月每月运行超过这个小时数,自建才开始划算
当前最低方案调 API仅按本月金额比,不含弹性与风险折价

按你的账本测算

三方案同口径
改参数后点「重新测算」

负载与成本参数

本月最低方案 调 API 租用 $1,958.4 · 自建 $766.26 · API $83.17
自建划算吗 165 小时/月 按当前每月 720 小时,自建已经越过盈亏平衡点(165 小时/月)约 555 小时,长期自建更省。
自建每小时电费 $0.57 8 卡 1 台机 · 含 PUE 1.35 与其余部件
租用每小时 $2.72 当月最低按需价 × 8 卡
每百万 token 成本(自建 vs 托管) — / 对比 $0.08317 填上实测吞吐后这里会给出自建的每百万 token 成本;用峰值算力反推 token 吞吐没有意义,所以这里不给估算值。

三方案明细

NVIDIA RTX 4090 × 8
每月 720 小时口径
租用、自建与调 API 的月成本明细
方案每月成本成本构成适合的场景
租用云 GPU $1,958.4 $2.72/小时 × 720 小时 需求不稳定、短期项目、想先验证再投入;缺点是长期单价高、资源受厂商库存影响
自建(买卡) $766.26 采购 $12,800 ÷ 3.0 年 = $355.56/月 + 电费 $410.7 利用率长期跑满、数据合规要求私有化、需要长时间独占训练;缺点是资金占用与迭代风险
调托管 API $83.17 DeepSeek V4 Flash 混合 $0.08317/百万 token × 1000 百万 流量波动大、不想管运维、模型可用托管版本满足需求;缺点是单价随用量线性增长、能力受托管版本限制

盈亏平衡对照

3 款可比卡型
每月要跑够多少小时,自建才追平租用
各卡型自建与租用的每月盈亏平衡小时数
卡型当月最低租金公开零售价自建固定支出/月自建月成本平衡点判读
NVIDIA RTX 4090NVIDIA · 450 W · 当前选中卡型 $0.34/卡/小时× 8 卡 = $2.72/小时 $1,600/卡 $355.56采购折旧 ÷ 3 年 $766.26720 小时/月口径 165 小时/月 当前 720 小时/月已越过平衡点
NVIDIA H100NVIDIA · 700 W $2.59/卡/小时× 8 卡 = $20.72/小时 $30,000/卡 $6,666.67采购折旧 ÷ 3 年 $7,282.72720 小时/月口径 336 小时/月 当前 720 小时/月已越过平衡点
NVIDIA A100 80GBNVIDIA · 400 W $1.19/卡/小时× 8 卡 = $9.52/小时 $18,000/卡 $4,000采购折旧 ÷ 3 年 $4,369.63720 小时/月口径 444 小时/月 当前 720 小时/月已越过平衡点

折旧年限敏感性

3 / 4 / 5 年
只换折旧年数,其余参数不动
不同折旧年限下的自建月成本与平衡点
折旧年限折旧月额自建月成本平衡点相对当前年限
3 年当前配置 $355.56 $766.26720 小时/月 165 小时/月 基准
4 年 $266.67 $677.37720 小时/月 124 小时/月 −$89
5 年 $213.33 $624.04720 小时/月 99 小时/月 −$142

利用率对比

30% / 50% / 70% / 90%
同一份负载,只改实际运行小时
不同利用率下租用、自建与调 API 的月成本矩阵
利用率每月实际运行租用自建调 API本月最低方案自建里固定支出的占比
30% 216 小时/月 $587.52 $478.77 $24.95 调 API 74%折旧 + 托管,不随利用率下降
50% 360 小时/月 $979.2 $560.91 $41.58 调 API 63%折旧 + 托管,不随利用率下降
70% 504 小时/月 $1,370.88 $643.05 $58.22 调 API 55%折旧 + 托管,不随利用率下降
90% 648 小时/月 $1,762.56 $725.19 $74.85 调 API 49%折旧 + 托管,不随利用率下降

常见问题

盈亏平衡点「小时/月」是怎么算的?

自建每月固定支出(采购价 ÷ 折旧月数 + 机位托管费)除以「租用每小时 − 自建每小时电费」。含义是:每月要跑够这么多小时,自建摊在每小时上的固定成本才低于租金。低于这个数就是租更便宜——因为租用把折旧风险留给了厂商。这也是为什么低利用率的团队不适合自建。

为什么自建每百万 token 成本要我自己填吞吐?

因为同样的卡跑不同模型、不同量化、不同批大小,吞吐能差一个数量级(vLLM 调优前后常见 3–5 倍差距)。用算力峰值反推 token 吞吐会给出一个看起来精确、实际错误的数字,比不给更糟。正确做法:在你自己或候选卡型上跑一次真实压测,把 tokens/s 填进来。

自建就一定比租用省吗?

只有在「长期高利用率 + 卡型不过时」两个条件同时成立时才是。反例很常见:买卡后卡型一年内被新一代替代,折旧还没摊完残值就掉了一大半;或者业务波动导致月均利用率只有 30%。所以这页给的是盈亏平衡点而不是结论——先算小时数,再看你的真实利用率能不能达到。

采购价该填什么?

填你能实际拿到的单卡价格(含税、含整机分摊)。上游公开零售价只是参考:整机渠道价通常低于零售价,而紧缺型号可能高于零售价甚至要求搭售。该卡型上游没有公开零售价时,请直接填你的询价,否则自建方案无法计算。

租金取自公开报价聚合的当月最低按需价,托管单价取各托管商公开报价;报价时间 2026-10-28 12:15。