TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:
9 C }3 e- N" ?# o
7 N$ |6 ~9 K$ B3 b* a一、总体分析框架与核心结论
# E% z- ~: C- T- Q' X1.1 分析框架概览
" x4 U. u: U5 G2 q7 B拆分维度
) t$ v" [7 z2 p( }& ^ f( Z/ W A h2 X; p+ h; v Q5 l
阶段: J" l9 `' a! O, o
建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施
3 |- I$ N. O/ ~6 W2 Z运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等5 `# Q( C( e4 P- h9 k+ O* ]7 m
区域:) T* R, s) ?7 d. Q) y7 n
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
" d: `2 Z% b0 p% X. C技术方案:1 S5 d+ l. W- t. c
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)/ H f) [0 ^ n' {
Google TPU(v5e/v5p/Trillium 等)* D, |1 E; a9 V
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)
, c; R5 I+ R6 Z* a9 E算例基准7 R- f0 Y% ^, Y b# \4 q
2 n; y3 y }# C- y/ Q4 |以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:
. w! c H9 E, O6 S1 t5 O- f: Q其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW: z" x4 G) c! r6 ~7 M. G
PUE 假设约 1.11(高效液冷场景)[1][29]1 ?* B% R' J. h; L+ [1 }
时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]! W9 X8 _' N7 B, _. G2 A
关键指标* C- I) c/ p8 ^6 D' y' T
4 t7 G4 X. b1 g! `( b$/MW 建设成本(含/不含 IT 硬件)' p9 Y9 z* V3 l4 ^9 h' v# F7 B# V2 a
$/kWh 电力成本、L/kWh 水耗
1 _. l1 J: P& ?. @6 F$/token 或 $/百万 token 的综合成本# X/ V/ Q8 Z. ]' T p" a* r
Token-per-watt / Joule-per-token 作为能效基准[17][18][26]
1 Y. T/ |, _- X: X; X, u) Y项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)
\8 S, j* z6 }1.2 高层结论(供决策快速参考)
2 p# n0 W; Z# z4 z$ J B# M建设成本:AI 数据中心相对传统云数据中心成本翻倍9 i9 @1 s4 v* A+ U: J
$ m2 S2 @& K6 ~) j. M1 N
传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。
9 F( F9 l( m/ o, ~AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。# ~% n: z5 e+ q' L1 l
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。
( p& \1 ?" C# L! s, K" e% h区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
% X) ~# L/ p0 V8 C8 ~" \9 U% m6 G0 d* N4 T
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13] [ }" d, r: t" V3 W
美国:$8–12M/MW,400 MW 约 $4.0B[1]
) b- M" f( W% }. D& Z欧洲:接近全球平均 $10.7–11.3M/MW[2][41]4 ^# K0 b) a$ ]1 f
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
. i9 L$ {: g5 K! Q0 u8 @结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。
+ s- p# o. R5 x1 b$ Q4 U" ROPEX:电价与人工决定区域优势
: h$ B% }4 s2 M; p a
. s( M6 C4 F5 Z: X9 M电价(2025–2026 工商业大致区间): f5 K5 |4 q+ b. u
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]) y2 ?/ `, f: }& i% [
美国:工业用电约 $0.085–0.09/kWh[44]- N3 W* x- H5 d. q# Y' P6 v& @
欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]
) I8 s4 E* C+ S4 g; g. C中东/UAE:工业用户 $0.07–0.13/kWh[47]- _- x0 E# ], e' _, y
人工:
! m; D8 P% [. D2 t中国数据中心运维:约 $22k/人/年, ]: M p( Y/ _; t1 S
美国数据中心运维:约 $120k/人/年[1]
% F3 H" G5 C. J0 _: |, w结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。! T1 a* n: l% m) g9 K, V7 v7 }, n @; R, m
能耗与每 token 能源成本:能效差异远大于电价差异
! S8 I9 P8 P$ o' K* R+ _$ H4 E6 F6 C! j4 W5 o9 h
IEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。
$ ?3 v) [8 b; e) d$ F+ G$ t6 V: b大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。
R1 P7 ~$ P* {2 a$ O将 token 能耗约化为统一口径:
+ O' G2 {* O, r& K R粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:
0 j, e1 c i2 }5 p+ @5 g; o; c* [+ a中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token8 C. C; l/ N5 R+ X0 @
美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token! ?, R) R& q) J0 R+ A
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。7 N- q1 D+ x" {5 G3 ]4 V
不同芯片方案的核心差异8 {3 K, B) ?) Y0 o
. Y* a4 Q0 U# Z( T1 f& lNVIDIA Blackwell/B200 & GB200 NVL72:: P& p# i$ k" o% Z9 h" I
单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。6 L+ c& l; ~/ c$ B1 B' r) Y1 [) H* m+ O
GB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。' _$ }& z+ c" y) j- ~9 ?. e1 p- h
Google TPU v5e/v5p/Trillium:
) ` E& U# @8 W, ]+ t' N3 |/ ^& QTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
9 K) ?* @& Y$ l# F* MGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。
* O0 [' {0 x* |' i华为昇腾 910B:
R+ N% o8 j0 O, iFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。# X4 h6 F% d% b, t
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
% [6 R/ A# [" Q* ~8 n阿里平头哥真武 810E(Zhenwu PPU):$ D9 N+ P+ g6 m- X: p2 I
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。2 }/ Z$ F5 @% C3 K
结论:
8 D6 Y& v' y! V- N, k* V3 [; N, b能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。7 i& {: l: e! E7 H9 d% m+ n
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
7 R$ C7 {- Y S/ i& R1 C对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。
; d, F2 q3 ^: g4 b7 G自建 vs 云租的 TCO 与 token 成本
( e9 O/ v3 m! p: ~0 b3 o
_& e; N, F1 O! x# j: h `9 RLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
+ D* e6 m" g, e8 d8 ?- K8×B300(Config D)自建 5 年 TCO ≈ $1.01M;# _, U+ T% F& o; G5 |' ^
等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
# e4 @; i8 q4 e. h& s! g8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。7 W7 j7 U( ^& i& H3 {9 S8 x
Token 成本对比示例(LenovoPress 场景)[28]:* I' J; a* S2 z8 ] a, d P: \
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token/ L1 V. D6 U9 P8 q& P+ W
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
7 Z. g" q4 c) `同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
* g. n, N* ?4 N* ^9 J0 V! M4 JLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
" Q9 D; {4 b3 s, W* [5 s' _结论:
& _5 P$ D' ?! q. _( Q$ I4 C高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。' c! I: a" n3 T- R7 R" s' I7 w
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。" |: H, \; k# \; b* o
二、建设期成本分布:区域对比
5 Q& _8 Y. O- W( o# s$ T6 V以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
" B2 | I' g3 D: U5 A2 B* f4 }" K, Q$ T2 L* y7 Q) ?4 U$ T/ X9 m$ u
2.1 全球/通用结构(以 1 MW 为单位)$ ~% [* o' i8 l* a
综合 JLL、ConstructElements 等[2][41][40]:+ v$ E1 s2 h$ H6 E9 p
0 [) h. r8 g1 b/ F; b6 z壳体+机电(Shell & Core)- A( _5 z8 `8 H3 d7 c4 ]) T2 [
% h3 `5 [) U2 n, t/ s c全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]
: E2 p4 [$ N; u" M5 B+ w; ~5 J. d, r( b其中按成本构成[40]:
3 L M" O, Q/ P& ] l7 _4 [电力系统(变电、配电、UPS、母线等):40–50%
+ }* y7 h- `/ F1 B5 M' o& K机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
1 q( n1 M* t9 r3 X3 R; e9 K建筑与土地、结构:约 15–20%# M7 O+ f3 o8 Y! ^0 j" F$ m r
其他(消防、安防、楼宇管理等):约 10–15%
3 N, i% a2 W2 T, Y% YIT 内装与 AI 基础设施(不含芯片), T j; \" D( I3 a* y. m, a+ h5 S
* \' D' _) }+ a, R- V! e- |高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。
4 u3 G# _ o+ g$ H% RGPU/加速卡硬件 CAPEX/ h4 X( R h4 Z- X$ w
9 N3 C7 H# ~' C! j9 |& x$ t$ f多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。8 {" f: l8 Y5 ]; M# M$ W( |! \
2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX' [2 g! i# Y& p ?1 i: [
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):( K; z. }$ Z$ O" b# J* @! @
( l1 X' r& k, s2 ~区域 典型建设成本(壳体+机电,$M/MW) 备注
! O7 E5 ^7 o7 D, q中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]
n7 O! o3 I; @: Z美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]5 T7 w3 w, u% T9 N. e" w ?4 }
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]
) h p) q9 R# A8 \# v中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]" H( R: y. r/ W4 t" e6 ]
结论:) Y0 m9 J! f1 b
9 [9 N4 F. J; v& Y
单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。 x) z- b2 M8 O8 P; C. n
若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。; X1 R6 v4 m/ T1 i
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
1 ~, F/ d/ o' f9 B以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:5 x6 a4 v* W% V
& }* `) p, g) j
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
9 ?5 q; U5 E! uGPU 配置:: _! p8 R8 C% z4 A# } w6 d4 D
有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);" V2 X w- `$ M) p3 U( u
每 rack 成本 ≈ $3.0–3.35M[34][69];+ G x2 ?# s0 u! X2 \* S
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。& X# H' h/ e a
与不同区域壳体+机电组合:8 H {8 }* \; m4 B: X% ^6 m% ?& p k
, _' V1 B9 \8 ^4 }
以中值估算:/ M' L* L9 r4 ?6 K
4 X2 W( X) U( K9 q1 l) A中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
' b% E1 B0 U4 _( @4 I5 `0 |美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B; Q. s" X% }) }
欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B( e4 x8 Z! ]* c
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B8 J$ g% a8 |* a2 h4 V5 F8 D6 z* H
可见:
; P5 `3 V. g4 a0 b' V
8 v" @8 p$ [( h& {% dGPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。; d9 N0 x/ {6 C6 l; @; N
相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。: M, G! V2 L/ e L! v |
三、运营期成本结构与区域对比# ?" [& ^- \7 t5 M& K
3.1 通用 OPEX 结构(高密 AI DC)
3 W- C- P+ k: S! U结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:$ g3 n. i3 q8 s6 @& E
2 H7 C0 y! e1 L3 j$ R0 G& O电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。
. V3 }2 V% r9 i冷却与水资源:- s- K" }% ~9 _6 f; K
能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
7 C- b$ ?5 ?- Q. ]5 a& l, t水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
3 E. } c! m# V0 D& \ G" g1 f人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。- c* @# E+ f1 m4 x' h
托管/物业与维护:3 A* V4 M8 X8 [, k4 ]2 a: e
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];6 p" Q' w# |# ~7 F
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。( `7 @4 H; o$ |8 a0 b' Q
3.2 区域差异(以 400MW / 3 年期为例)+ c! L1 K6 D* u' _/ f5 `6 x- W8 u" m
使用 ChinaTalk 的电费与人工估算[1]:
, X: w' r3 N6 M8 X3 v: T2 J* }, o2 v# Y' K- M* U( n: [, Q
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:
- T o9 W) m8 p0 n中国:约 $0.06/kWh → 3 年电费 ≈ $350M
6 P5 ~6 y6 W. W4 p) T美国:约 $0.09/kWh → 3 年电费 ≈ $600M
3 G1 E# l1 D/ m% b0 ?1 z中东:约 $0.07–0.10/kWh → $400–550M
, _1 {7 B) w7 o& w欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
9 C r) ]" h" d4 [, t! X" B水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:( I6 d8 ?/ }* @
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]3 ?1 }! u w' R0 n
三年水费级别:" h4 L- i; q4 j; [
美国:$40k+4 a' _( G4 F$ `" X$ @
中国:$20k+# Q0 ], V$ R. E" U5 P+ u# c
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。4 ^3 v- `( `7 g4 T0 k: W
人员成本(3 年) – 假设 500 名全职运维:; H8 d l! V' u/ g, H- I
美国:500 × $120k × 3 = $180M+
6 ] g2 u, b) S, E7 ^& n& g6 R: y: d中国:500 × $22k × 3 = $33M+
, ~. ]' W) l |' X9 _; `% R差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。. T7 }) T8 E/ j, y& x+ r
整体 OPEX 粗算(3 年) – 400MW 场景下:+ a$ H3 {+ ] @% J
0 C2 ?" S$ N+ {! b7 R- y; Z项目 中国 美国
% p; |: I R Z& |& N k电费 $350M $600M
K9 b, t/ U; l- @: [水费 <$0.05M <$0.05M
7 ~0 j. K7 N, k人员 $33M $184M, N. [( d" I) H* Y% k- n" V
其他维护/托管 同比例估算,地区差异主要体现在人工与地价
* E4 X* M# t9 { ~$ l7 z" Y6 S结论:$ p# {* M" Q; i+ b, O S. M
5 F. f6 u2 A/ S v' [
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。% k/ e* E+ O8 J6 P1 T8 p4 z1 N6 Q
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。
8 N8 G. y1 d* L四、基于 token 的成本与利润推演
3 v: a3 y) A0 f) ?, A4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元); l6 X! T% u# A
统一假设:
% |) H: N0 h) R3 c! @ c( ]
! S+ y" c4 V" N0 N8 V典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])5 d% |0 f ~" k+ c( ^' V/ c; _4 ]# x
1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh4 M0 n* t' x6 y! H% E
1 百万 token:278 Wh = 0.278 kWh
4 M# F1 s n1 B# v. I, q/ t) O场景 A:美国电价 $0.30/kWh
! k E/ \$ g: D9 N, w; ]5 b2 Z电费/百万 token = 0.278 kWh × $0.30/kWh
$ Y- f, _5 n4 o≈ $0.0834 / 百万 token4 J' l: W8 o; X2 } N7 g
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh
+ [+ f4 E* g1 X" m2 |电费/百万 token = 0.278 kWh × $0.042
' y" h* N0 n1 f" s8 @≈ $0.0117 / 百万 token# B5 f/ c f2 S% J. a
对比当前 API 价格(OpenAI 2026Q1)[62]- M' Q/ B+ p: [6 k2 Y& Y! I
以输出侧为主(成本最敏感):8 l" u2 r. i# E7 j7 J/ M. Z9 z
* Z( v; ~7 w6 W
模型 输出价 ($/百万 token) _: ~4 `& J+ J6 Z( }- e! P. \& w
GPT‑5.2 $14
$ C2 B- J4 q4 k" A c- P/ pGPT‑5.2 Pro $168" f4 b% I p7 @6 O4 a
GPT‑4.1 $8
+ D" W0 H W' d/ P1 P4 _* D2 d: i' tGPT‑4o $10& `8 ^% S( S8 K: a9 _4 S+ @ T% `' Z
GPT‑4o mini $0.60
! t9 R+ Y4 q* V2 f6 ]. T则:9 ^$ h2 ^6 G) {7 {, ^4 H
, i4 F4 t! l7 T0 A在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。
6 N) U7 y% |) s. v- l在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。8 p6 F9 P+ B7 a2 ~. ~- T! b
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。, x! E/ i' ~0 v3 k+ G8 M/ c1 `2 e
结论:
9 w. a: T+ t) w1 Z即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。# W* X8 U9 e$ L
0 H0 {& r8 ?9 a: _: z# }3 b
4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO), G; h8 {+ x/ ?5 A. Y1 j2 O
以 LenovoPress 的 8×H100 Config A 为例[28]:
' w8 j6 u7 g7 J+ x) W$ F+ j4 _
1 G. X6 h' u! k2 j- F5 年摊销下,8×H100 本地推理 70B 模型:/ I7 w! `8 F! r7 i" G+ z; r3 L y
小时综合成本(CapEx摊销+Opex):$12.08/h7 t) s% G" c: b' ^! N
吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens
' b* P4 D( m' Z成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token1 X, L v Q y! r: N2 O/ H
电费在其中的占比:9 k+ U1 @. U# W& V6 P6 p1 s' [
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]
6 c7 T& Z9 [6 d- g电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token
! R2 f# B4 V, d1 g$ [ I! ?/ K电费占 总 token 成本 ~7% 左右。
3 {3 r$ X( T% {) _: K/ O若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。" F9 ?5 {/ T* D
若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
, Y7 ?, n) X% G/ W
0 e$ y" V3 I$ h- J: j' W因此:/ `$ V0 ?; w7 V7 |, [4 A' [
* R+ P0 g5 q" C3 n' y在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
% Q6 C" z6 D7 A0 {$ K在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
* ?6 k0 j$ `: V9 _. n- \) ~五、不同芯片方案的建设与运营成本对比9 o/ t' U I5 u% d t
5.1 NVIDIA 方案(H100/H200/B200/GB200)
/ X, L$ Z# ~- cCAPEX:; ~% x3 t" |+ ^( b
% r4 q3 S* A5 \# J# Z3 j4 C
H100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。
$ z4 E6 R% S j& r6 u3 E2 |H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
5 h# Z- L3 @3 e- e7 p) M3 J$ g) _B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。' C$ ?" I; e/ ?" h
GB200 NVL72:, h$ E0 Q% V9 b/ M0 l, h7 W# o/ A7 T
每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。) n+ D: I0 T1 y/ k; V! h# ?# a* x
冷却系统每 rack 额外 $50–56k[35]。) I! h& ~. l- L$ u/ d( @
在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。( u$ A( m* z( T) _& _1 K
OPEX & 能效:0 [. E8 }+ R8 R/ ~0 Q$ F6 v
6 p$ ^3 Y# ~7 ^' V% N
单 GPU 功耗:1 Q$ b* ~! p1 v
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
5 p# Z" ?- }2 l+ `" T6 G2 mH200:功耗类似或稍高,但性能/W 提升[9][10]。7 }! R+ {" D% i" a0 p6 M" J
B200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
8 H, `/ ]6 _2 K: J7 S; X. EToken 性能:
G& j& f! l% ^4 u1 r2 XB200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。! I/ y! v+ i1 i( k
NVIDIA 的优势:
( a% r. c: Q* ?& i: |) B! w; @/ M. u/ s, ?/ E
软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。
3 s3 A, i4 Y; E0 x, O但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
# e. O" n/ f( }, [; v5.2 Google TPU 方案. n0 V) ?$ b+ ?3 r0 _$ F1 u
CAPEX:
) _# V4 e4 ~8 z& X
1 w8 `) C- U% w9 T单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。' S. q0 k* c C- a
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。
* q$ z2 C* l! ~5 J0 N. Z! ~! `8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。* {/ C! v+ p4 _$ M C
能效:
" z& L3 N; E6 m, d" y
3 O9 s) Q6 V1 t: j9 u. CTPU v5e vs H100:
" \* `. f0 n; {" }* ~同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。
* G V3 i9 ^- m% O4 U$ S1 s2 ]测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。- \" H, o4 H. W7 _7 D: ?
新一代 Trillium/TPU v7:! u) `8 y1 y+ e* k
能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。 c) P# U+ k! s4 W% D( \1 l; ~
Google 方案的特点:- J+ E J# [1 Q1 ?& u: B' b* ]
& Y9 N" Q" L8 N# C
自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
+ |' @/ F( n: s对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。& R# n& X. ]1 J! w/ ^1 d4 s
5.3 华为昇腾 910B / 910C 方案* g! ~( V: f. d; s% [- o- o
CAPEX:
$ ^: x! S9 W* {) l4 ]. i% V6 e/ v) `/ R- L- A0 Y
单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
6 E$ ^5 D+ k' N. | k7 A与 A100 对比:4 e0 z2 N7 n" d1 s
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。0 d% ?2 @# Y9 b3 Q6 k- P
市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。7 s- {3 a% i7 ?$ @
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
) S2 I4 j9 U% K$ Y0 ~ TOPEX & 能效:6 x+ |* t4 E7 p$ v" k/ n; d
3 n. a z' ?5 b$ c910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
6 b( p* X* ~4 R6 [+ N1 Z部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。/ @" m6 z7 W" M$ q! q$ D0 W
在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。
9 n0 r& X3 B" [5.4 平头哥真武 810E(PPU)方案5 F0 [ \1 a# D1 P5 c
CAPEX:
8 [$ }" u6 ?% S$ Q
- `! O) f" x( k* |1 w5 K技术参数:
% V) L9 V9 N! w3 N# O96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
6 q/ s; n* [: ?性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。
: V: m$ D1 t5 O+ Q2 ]价格:
7 {. t9 p$ V V未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
* F3 ^6 i4 u! \( W! t! J# w结合国内报道:
: M& l+ r* ?5 N6 \2 q2 N) O, m; Z2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。 \7 r* _0 Q- W( x. a3 l4 r( j0 F6 I
数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。) N6 u7 L' p! b& [/ b' q: L
OPEX & 能效:
4 a) Q( p* v2 U! S, @; Q) x. O$ t6 t& G1 M5 x6 ], M' ] b
400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;
7 g7 m: } s& \' @( E, J" k在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。; F* j8 L+ H; w' F' l
六、综合比较与策略建议
- n q& K! F; a: T4 l% K6.1 区域维度:在哪里建 AI 数据中心?
- z) Q7 F, n' Y7 Y; J' x H纯经济性(TCO/tokens)排序(假设无政策/合规约束):1 G# b4 b+ t a9 E! H
d) D) z+ V1 j3 c- F! O7 S4 Y中国西部/北部(电价低、人力低、建设成本低): k9 ~$ I9 @( \6 T
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)- V2 B: H$ L: R) V2 x/ s
美国电价低但人工高;东海岸/加州电价上涨压力大3 q5 d z1 c0 l! z, L8 a
欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求' D& k$ Q- R0 ~, {3 f; B! P/ S" z) Q
若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:
3 E: ?6 {( S3 O( X; C8 p" U5 t* y7 L! _2 W2 Z q! Z
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;: G/ G: T3 L K7 E# C
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;
- ~! b: `- L: k" z但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
$ }/ A% o8 K% A6.2 技术栈维度:选哪家芯片/云栈?! l: J& J( L, i/ L$ P+ n$ [
若目标是全球最优 tokens/$ 且不受出口管制:
& `8 a4 t0 O( _
1 }0 }; U. B5 N, O( u9 M/ MGoogle TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。
0 z _' H' z/ s$ R4 E. |5 Y若在美国/欧洲,能自由采购 NVIDIA:9 I' n6 b5 [$ g0 D/ V' Z
7 D! e( f+ t/ F9 T. |1 B) p短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
$ r0 H* b- Y7 e& ?7 Q成熟的软件栈与生态,极高的 tokens/s/GPU;4 u) ]0 Y( G6 G1 v
在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;
% i) S" h% L3 x2 X7 o# G# s但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。' }; N7 o, j+ Y4 e% |
若在中国或存在出口管制约束:# q( U: |1 k. r! [
9 f3 O( G& `, ?* l; @3 Q
昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:) \3 C, j9 y5 C/ h- J
性能上已能覆盖大部分 GPT‑4 类推理需求;) T; i8 n& X3 |+ Z& B. N+ D7 A
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;8 v! Z* C2 _/ m. m
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
6 Z6 K5 r) }( Q; H! [建议配合:, x( ] I7 m& A3 y8 S* C
高效液冷(PUE~1.1)、& J T; A+ D( n" t& o
大 batch、路由(浅层任务走小模型/低成本芯片)、: H; s/ n6 T" _
强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
1 ?! s& U ?! x" i& a: t2 [0 ^1 b长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
; ~+ {- f3 ~. {
, f2 E1 y, N. I W, J: _5 e数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
+ x4 Q+ }7 } p5 a# E1 t/ H ?* `; Y这意味着:- a* `. u% o: {6 ^0 `
优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);
4 g/ u3 o0 }* h" C" ?" B' _$ L精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。- \# e A7 S. d" W: z1 [8 [
6.3 针对你关心的具体问题的简要回答
; P" [/ i i% n' O% x- P# c: W, TAI 数据中心建设 vs 运营成本的大体比例?
( b+ a: c/ e) p+ y& m
|5 C; J5 s4 ?& A( s% F9 ^" N在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。
- g# j. h: d: i% [/ H% p$ k其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
) c" S, G' d |* ~# G: J! v中国、美国、欧洲、中东的成本结构区别?1 M7 j( r; g5 v+ k2 k) L: w& U
. A# w1 ^7 \$ k: `8 d5 c- c
建设期:
8 x( c* l7 r* S% E! | e中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。7 R0 _4 Q! G! L! @1 ^
运营期:
0 p4 ]* }, r) z3 s. j5 Y0 C电价:中东 ≈ 中国西部 < 美国平均 < 欧洲+ E. s9 J* M, V8 }3 k) M
人工:中 国 ≪ 美 欧,中东居中。: }5 K. c- w6 n3 {/ G# X0 v
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?" P8 s/ v: s" ^& V8 I$ z* j1 l
[) c% L3 Y4 p5 {: {* z对于典型 1 J/token 推理负载:
! r' b- W% I" ?+ Z美国 $0.30/kWh:电费约 $0.083/M token
, u# k; P: O( U中国 0.3 元/kWh:电费约 $0.012/M token N; L6 [9 ~, w T/ |! L
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。9 D5 t) g3 v. G) q2 V6 ~7 u
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
6 _( g* _( s' G# x/ T& `8 i2 c6 q3 G+ S, j5 a2 W/ t
在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
# o% {; E) t W4 B3 J# x# k( V全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;" |6 o7 i7 V) O0 ^( S
中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|