TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:! q/ I' u0 Q" b! m# `) Q
- @# a$ j2 F4 C# g1 f; f0 m
一、总体分析框架与核心结论! U8 n3 O$ a. m: f
1.1 分析框架概览% h$ I R9 U: P5 R& Z% G# Q9 {: j: q. I
拆分维度0 [* Y! I# a3 U$ x4 V$ F
0 c. |# a! {) ^* i阶段:
. E% x, J! h" }0 L% r$ ^建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施4 R" B4 M2 E2 b. w% m0 G) x
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等
, r7 K7 }$ S( g* G3 G1 M" Y区域:9 m& ], ^, e ^& q9 m$ [
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)8 k" E0 {0 O6 K7 k b6 y# W& I6 W
技术方案:* j. k: R# Q6 p9 N
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等); b: Y5 x& l9 B. y8 U2 S4 S* C* w
Google TPU(v5e/v5p/Trillium 等)8 `! P9 M8 [' N
中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)1 ^6 |7 B1 d, f: a
算例基准
! O. h- ~: R( k2 }; Q( k2 t7 H) u- c4 f
以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:4 \% L: ]. [$ Y+ B; N
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
& E9 r7 Q( }7 P7 UPUE 假设约 1.11(高效液冷场景)[1][29]
% i$ ^* |' A7 m# m' A% u" I9 D时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]$ k6 l5 O- b/ P
关键指标5 j o2 x& O7 ~' h [( |
( p! X' k) y* {1 O' t5 b) R# W
$/MW 建设成本(含/不含 IT 硬件)
$ I( {9 u. `! [( i/ Y$/kWh 电力成本、L/kWh 水耗
& p# f! v' g* ~* R& K. }$/token 或 $/百万 token 的综合成本+ f4 ?; D# J7 _# ]( p6 o
Token-per-watt / Joule-per-token 作为能效基准[17][18][26]
5 J u. t$ ]- j0 u9 D- F项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)
/ v8 N* e K& p0 q" B; |2 i1.2 高层结论(供决策快速参考)
, `; P. r' p5 C, D8 ?建设成本:AI 数据中心相对传统云数据中心成本翻倍
. ^' q/ H$ U4 I. b' ]
) f/ ^$ a8 b6 J' ?, u( d5 j传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。
/ }# s+ o0 X& \0 a _' N0 OAI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。
+ E0 i! j9 \# G按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。4 K% V' }* [ s
区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
* F; t3 O$ {. N2 D- k( v H/ \$ c' A7 \
中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]5 \& W& C* d! e' u; k4 k
美国:$8–12M/MW,400 MW 约 $4.0B[1]
8 k7 b' T# f- s9 I1 ?! h3 w1 j( v欧洲:接近全球平均 $10.7–11.3M/MW[2][41]1 B' ~. r4 L" g
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]0 G5 P& P, S) P3 v7 ]3 K \5 N
结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。! u0 h3 S0 }3 I3 E
OPEX:电价与人工决定区域优势' ~$ e I& f7 x1 B
3 H( g% q1 n% i& H# F1 A) F+ v( j电价(2025–2026 工商业大致区间):
( {' _5 {+ A( g4 [( J中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
; C9 u* h7 J5 a美国:工业用电约 $0.085–0.09/kWh[44]
1 F' E3 T/ @ y欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]
! N0 V3 A8 `& y中东/UAE:工业用户 $0.07–0.13/kWh[47]
- B5 m) R b q人工:
$ j! i4 ?" _( {' C中国数据中心运维:约 $22k/人/年& E! T1 {- A9 b5 q6 \* z C& G$ A
美国数据中心运维:约 $120k/人/年[1]. M, M' p7 U5 }0 Z) B, a
结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
m! T6 m$ ]- q6 T能耗与每 token 能源成本:能效差异远大于电价差异* d, u& R0 l# r% J. b2 w5 N0 g
3 J4 c& W+ ]+ {. a; G6 v5 H
IEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。( b! l$ \7 U/ }5 g% a9 e" S0 {2 _
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。2 P' s+ ]" R, J# ~7 b
将 token 能耗约化为统一口径:
. @6 C% u7 |" J: o粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:
% ?1 R/ U, }9 G K7 f中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token/ v# K7 y8 o$ L/ U! J3 j
美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token
: G0 }2 S5 e, Y) X& X对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。% Z |8 ~7 s$ X, L9 Q$ \
不同芯片方案的核心差异
& S: b8 S2 Z% h( X4 M# c+ d6 s" k+ M* q
NVIDIA Blackwell/B200 & GB200 NVL72:7 m u: o# L3 K0 L1 A% i( a
单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
' n% ]% u/ J, tGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
0 c7 ]( Z$ [# S7 |" GGoogle TPU v5e/v5p/Trillium:+ S6 ?% F# ?$ O4 t
TPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
6 Y9 C7 M6 F2 Y2 G8 oGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。5 d5 J& s3 \. A
华为昇腾 910B:& {( D, g+ _' c# A0 b
FP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。 {" v7 V% C6 x5 C
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。& D! j; G& w) O# r
阿里平头哥真武 810E(Zhenwu PPU):
& W$ I8 a9 t# f7 P1 x( y96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。: {5 F8 j; c" G4 W7 W7 r
结论:/ N) Z: N4 m& i5 k, m' `" W
能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。
2 y# h" Q$ ]; ^单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。4 d" d8 n% X5 N1 N4 f. `
对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。
0 @+ s% J c; [* X* ^% b3 U自建 vs 云租的 TCO 与 token 成本
9 a1 z, N- q4 X+ [ y5 E# B( W0 A4 K$ k$ }4 [9 ?1 O$ x
LenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:2 c4 n+ M9 b& k
8×B300(Config D)自建 5 年 TCO ≈ $1.01M;
3 z1 \' ?& V; X: l等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。: b/ C* e& h2 }: Y
8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。* y* l! t6 v! h; w( J$ q
Token 成本对比示例(LenovoPress 场景)[28]:
! `* }$ u% Z/ Q( s5 mLlama‑70B 推理,8×H100 本地:约 $0.11/百万 token& |, K& a& |, Z: _' s2 E4 s
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
- f L. H9 e7 E$ B3 s0 n: y! B同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。5 e% C. \9 s' P3 v5 K4 n) `1 J! o
Llama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。0 _7 v) Y. {' a2 }
结论:' K7 ?6 S+ ~1 }! @, O! ]: l
高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。 k( O$ h; S1 h9 L! N
Token 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。8 N+ w3 _6 z) S! m; z
二、建设期成本分布:区域对比
/ r. c8 q7 j1 Q q- p( [以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
6 } q1 @: i* ~7 ]$ d- V1 {2 c- p- g( f6 b) W* h0 r3 X
2.1 全球/通用结构(以 1 MW 为单位)
! m+ E3 z& }; L+ c2 z, t综合 JLL、ConstructElements 等[2][41][40]:! s, S' a4 n" b* _9 k1 R9 [$ t
$ S3 |2 Q0 b+ [8 w% W) o; o
壳体+机电(Shell & Core)
8 }. @ J. c+ T& c9 q7 F( G# |$ }" y0 D
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]8 ]$ G, _' x* W
其中按成本构成[40]:# n, y( k% g& y; _, J
电力系统(变电、配电、UPS、母线等):40–50%
0 V) z& j5 s! C% g6 L9 z7 h机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
( C Z K$ H) @& n建筑与土地、结构:约 15–20%
/ O+ Z) \: g2 j# M( z+ p( r" y其他(消防、安防、楼宇管理等):约 10–15%
, R4 ~$ ?/ i* h2 m2 hIT 内装与 AI 基础设施(不含芯片)
/ Y. }% w* f$ o$ n1 e: E( x9 {$ T3 E; }6 v# Q
高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。
0 |; T5 p+ I; Q8 i( f; I3 I0 ^GPU/加速卡硬件 CAPEX' g j3 {/ R3 B/ I3 o4 Q$ ~
4 W9 D0 a( z& O" c# c. Y, Z7 W
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。2 J$ N5 `, Y! m' A4 @
2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX/ g( C+ {, p0 t1 E
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):6 K, g3 s5 ] Q: d- }( T6 Z3 H
) I8 ?# u7 M* A3 N5 Y" O
区域 典型建设成本(壳体+机电,$M/MW) 备注
`" [0 s% }5 z. y9 O2 |6 I中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]
. I" u+ A" T; W5 N4 C! @' n+ L美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]6 A) B- J- q _
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]' _' z; d& ]! [" ]5 u) r$ W
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]. e# j" h: K* d# T2 o/ N$ w
结论:
' f# Y! ]# U4 l7 e0 i. Y" m) E# @. o4 ` ~; J$ P5 ~ o+ x
单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。
' K- R$ }: A+ [若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。
. t, Q) k4 f x' P* S" P. p2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例); O/ u0 }$ | m% F }7 G% Y. Z
以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:
# [/ o0 Q+ h1 E' _6 V" g6 S3 a4 P6 q7 Z
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;% W/ ~' U! d* V& r; C
GPU 配置:
3 h4 C2 D% [6 w5 @% f有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);1 @7 }" w1 M1 N2 H2 V
每 rack 成本 ≈ $3.0–3.35M[34][69];& N+ ]% U: l9 U2 |8 m( B
GPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。
3 h# o# M C6 I+ T与不同区域壳体+机电组合:
! r8 r! ^* b* @. {4 z# ?
x# O8 U/ S/ M* z9 y4 r: |6 @3 V以中值估算:
6 Y* F8 }/ }0 b/ T4 B" i& K
H; `4 r7 M' ~, F( H, _$ x中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
0 }- X- j* a( [' H美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B# m0 h* Y3 A& `7 [$ D9 o
欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B
- T5 P" z. C5 S& S; A中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
) n' @# Z. d2 A/ I0 K9 T0 I1 H. G可见:+ {! X6 t) O1 W" S5 [
% J7 ?- \4 j" f1 r; X! E; A t
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。6 q, e8 a( L. A' [& v5 E
相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。- l; k( k( _( W& i$ A3 F2 B
三、运营期成本结构与区域对比& S3 J" C8 W- i# a2 V d
3.1 通用 OPEX 结构(高密 AI DC)
5 d" q, I) Y, s/ {6 A: i3 Y8 i结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:
( R8 h) f$ o J$ @
7 J/ |. W/ G1 a! j2 t. f电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。
' V( L* p& L- o3 R8 E冷却与水资源:
. s6 a7 [1 c; J: c能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。0 m$ A( e, m- }% T
水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。0 c, a7 N7 R4 q
人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。
' e, h; n, A; x托管/物业与维护:
% S" p e2 P) i* S4 G; K B# J托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];2 O6 G A6 z3 ~8 g( \
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。9 O5 f" z: v# b7 z! s) K
3.2 区域差异(以 400MW / 3 年期为例)& E9 @; c# H4 Y5 i
使用 ChinaTalk 的电费与人工估算[1]:
) |8 w3 _' s' @- Y" g9 p# g& \7 v+ M8 C' D# e2 P% t
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:$ Y" ?" y2 ~5 ~* ^/ l
中国:约 $0.06/kWh → 3 年电费 ≈ $350M
3 p3 g- }; S; l4 B! T美国:约 $0.09/kWh → 3 年电费 ≈ $600M
) t9 @7 `9 V7 y" b \" h) b中东:约 $0.07–0.10/kWh → $400–550M
) a4 v% m# r8 t, \ B; S欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
3 L7 L& i/ h$ c水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:* G% U$ Q3 I$ Z$ q
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]
9 Y( ]3 T; |, H0 {三年水费级别:( R7 \6 M; c. L& f6 Q9 v; F6 J; d
美国:$40k+% O7 e: h! s7 l8 G. D1 g
中国:$20k+* z' @+ \- m4 }. r2 `$ }" S' ~$ J
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。( Y5 h( c2 j/ K4 R
人员成本(3 年) – 假设 500 名全职运维:
) l% b U, |& m' Z1 z' B6 I8 T美国:500 × $120k × 3 = $180M+, \" N' X$ l3 R6 z" ~0 I8 B4 i
中国:500 × $22k × 3 = $33M+$ o! V& ^% ?$ L4 [6 I3 }4 s
差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
3 t, K0 _' \4 U. N: m4 _整体 OPEX 粗算(3 年) – 400MW 场景下: U. `% U: K! J% O' J# Y- e
* }$ S/ i2 a( j, i& m4 ?项目 中国 美国
, r; A8 u i8 T4 Z! ]电费 $350M $600M; Q L# s& s, ^7 v4 B
水费 <$0.05M <$0.05M% r* A, R1 S, L
人员 $33M $184M1 _8 M: j3 H/ \1 a
其他维护/托管 同比例估算,地区差异主要体现在人工与地价
$ p# i' B3 J' z @结论:
6 f: f8 J, M2 U! Z) {) c+ l2 t6 H' l/ @$ i; \) n! U4 f
就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。* P, }! M y' k; v8 x; F+ |
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。: `# m) A2 q+ U% N2 ~7 T
四、基于 token 的成本与利润推演, y" t5 z" |$ ?6 j# X+ f& c
4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
% J8 m) @; f( l" N. Y1 B$ `: n% R \统一假设:, g8 z; L3 ?. Z: A5 m. N- l
! h- K, C5 j# s2 u! W2 b典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])3 q0 q7 }( F, h
1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh6 B7 A4 n3 S$ p8 H8 C
1 百万 token:278 Wh = 0.278 kWh
4 f3 R% o- \& ~! [, j场景 A:美国电价 $0.30/kWh
+ B/ ]4 O# H! O6 D3 g电费/百万 token = 0.278 kWh × $0.30/kWh1 H0 {$ ^3 A% R1 O. c) ]
≈ $0.0834 / 百万 token) o; Q8 e+ g+ }* T( p7 V& P
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh
1 r8 E5 w+ j, X电费/百万 token = 0.278 kWh × $0.042
9 O$ U2 E7 ~& M- ^≈ $0.0117 / 百万 token$ k3 \& h, P. t% x- w& c% n
对比当前 API 价格(OpenAI 2026Q1)[62]
' {% N [4 \9 \; I# y' h以输出侧为主(成本最敏感):
! \( U; T. e: f9 g$ V7 f( U5 s$ z5 Y) d9 v# m4 K% ]! c6 ~% M
模型 输出价 ($/百万 token)
) K4 Z% Z2 C! L5 C sGPT‑5.2 $148 j. X+ p0 p& _) k
GPT‑5.2 Pro $168" c* m' K1 { U4 d) }7 K+ E
GPT‑4.1 $8
! e7 u1 z6 a% b2 x& oGPT‑4o $10
: r$ ~# Q0 B- i+ NGPT‑4o mini $0.60
6 e- G5 f# h l- T. G则:
5 n# P, \" W% K0 n' R; `! r* _: a. u% D( r- X
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。2 b' J4 y0 h& p* Z& A; J7 e
在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。& v8 d' Z/ o, T5 q
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。
" z3 X5 P, C0 b3 N9 [结论:3 z2 ~8 D' A) P" w1 t: \1 o
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。
% Q, l# d# E0 K; D' f6 G" A, a1 V1 ], W; E
4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)
( b6 T! Z5 ]( m, i以 LenovoPress 的 8×H100 Config A 为例[28]:6 u! @5 ^2 ]* d4 G
4 H; T% F4 ?" g: |, [6 k, W' T M' {5 年摊销下,8×H100 本地推理 70B 模型:
" Z1 ~% ^% e/ c+ d小时综合成本(CapEx摊销+Opex):$12.08/h9 J( T y3 p \0 Y
吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens6 G5 `% ?4 n- l% J1 B# s. \( ? A
成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token+ X% P" y- a9 M" O
电费在其中的占比:1 f; b& ~! q6 j
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]5 X$ X: c6 c, e) B
电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token9 q/ q0 d* B% f) C
电费占 总 token 成本 ~7% 左右。& S: v4 g5 e8 _$ {$ H
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
5 ]) S7 E# t. A' a若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
$ s: M( f% Z- g9 d' H, M
, A7 u6 s+ w/ b. j* a1 u因此:
, e- o" X, g3 o6 }& G% g" o: K- E7 p1 C, I( L% P
在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。. k- Z9 ~9 b0 d5 J2 P
在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
0 {" L' y7 T. H4 i4 d7 h五、不同芯片方案的建设与运营成本对比
3 h2 {( S6 v6 p- M/ \4 c7 d5.1 NVIDIA 方案(H100/H200/B200/GB200)
1 ~/ Q4 r4 Z# Z: E+ R1 f7 H! w0 bCAPEX:9 o, Y4 a2 W9 p; ~
4 \- y' P! |+ l! ]9 qH100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。
0 c3 z' P& Q G4 JH200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
8 z* \( |& R& z% [* `B200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。+ Q- b8 E; O0 \1 P8 X/ `! D
GB200 NVL72:
& \2 K, |( f* J9 A* [* w) k7 p每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。
7 v9 c! P K: `# g: [/ P冷却系统每 rack 额外 $50–56k[35]。
* b8 a1 x. C) w在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。9 J9 N! f4 Y7 r6 ^' y( ]
OPEX & 能效:
0 Q }" \7 V. k% |" V" V4 P2 [8 @ t* D& t0 M) t
单 GPU 功耗:
4 W9 Q2 w2 j9 [; l# d9 XH100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
8 x+ X: m3 B4 C; `; bH200:功耗类似或稍高,但性能/W 提升[9][10]。
1 @6 g, [ f; q$ S0 BB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。
9 q) r- ~9 R/ i8 e# c0 O; [Token 性能:$ ^6 w7 |' t+ a6 ?) J0 G- S. D! U v
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。
& }! S& d2 T! Y* M; a7 J# ~NVIDIA 的优势:
; {8 p5 l3 l+ @9 p1 ^& c1 ^
; w3 @9 U4 f: i/ M4 \' g软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。
8 k$ e6 h2 R7 S2 T6 ~8 j但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
- E2 e$ f+ K- l+ T6 o1 _! p% n5.2 Google TPU 方案) t p( p: V$ d. b5 a4 n/ y1 C; y. E2 ^
CAPEX:
* Q( F$ I& ^; q" D0 H! {. w& T: b' X, V6 F) D; G+ A. O# d' P9 F
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。
# J7 g3 a1 e: c' i8 UGSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。; _2 C0 j* l- }
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。; y7 L5 ^* e# J N
能效:
9 Y9 n% n! V2 G- ]$ b% p' i% i' Y. _8 w' K5 H" @( _0 z
TPU v5e vs H100:0 {7 @# P) I- `% G8 h @
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。9 U+ b% N8 N6 y" [3 a
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
5 v0 o. `4 D; N$ o) X) Y新一代 Trillium/TPU v7:
% E6 n* ]4 Q% B% T8 i能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。( a: q3 u$ d" w2 u1 [
Google 方案的特点:. h' i9 S( R. B% F' _4 o7 ?* C* X- |
5 Q) G1 l; D1 I7 b1 [. i9 V: z
自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;; \# u" \. @" p( E& n5 K
对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。
; X& j1 `7 {1 L5.3 华为昇腾 910B / 910C 方案
) J. Y: _$ N/ o8 ^3 Y8 OCAPEX:; w9 [, I2 ]' z+ G8 Q; i
0 Y5 Z/ u! T8 L
单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
5 `! Z. [6 V, K与 A100 对比:3 }! I' G1 j! M6 P) L4 U5 Y
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。5 U3 U7 r$ f" y3 x" R& v _
市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。
+ Y" Q: e4 }# m7 p: L使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
0 }" ^. g4 i- k- u8 K% ~OPEX & 能效:
9 K& w$ g2 Q" k7 f$ f+ D9 L. ]% `2 x) C( Z
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
- n1 i5 q- \' p$ E# L( B部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。
- i& w; `9 \( {. B4 P2 k( b在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。- J9 O1 a& [! f" q
5.4 平头哥真武 810E(PPU)方案8 V: |+ g# B6 v2 a' A
CAPEX:
" Y( m% o: H, V, F( N, M1 ^/ E: q# u# ]
技术参数:
% b. U8 b/ ~# h( _+ ]96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
# ]2 Y! R" N5 ]4 K& S0 |性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。
& n( ^8 ]# l* T9 `8 J6 \/ V+ t价格:1 d! U0 ?( o0 E& {/ s
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。
. o; D9 _, V# [# x. e结合国内报道:
& b+ E/ i* y8 h. ?- a2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。9 l3 d4 }0 A( v" s
数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。
3 x+ B2 l1 K0 [' t1 iOPEX & 能效:
: b2 W; S2 @/ w# }+ _* p- z
5 ]& y V- \8 i+ e( V. j9 A2 y400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;) C3 M% n0 n2 S$ c
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。1 l- q9 Z% n* @' p
六、综合比较与策略建议
/ }/ u$ o7 y! J" m6.1 区域维度:在哪里建 AI 数据中心?! v% E+ p/ `1 G. f
纯经济性(TCO/tokens)排序(假设无政策/合规约束):, z# X, ^5 S: m- f1 h& f
! G J* f2 A9 { B; m中国西部/北部(电价低、人力低、建设成本低)* d. j+ R5 C9 t6 U# c9 Y
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)+ P/ [- f1 z. s4 I O* A
美国电价低但人工高;东海岸/加州电价上涨压力大
0 D9 ?2 A( \$ ^+ Y: u欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求8 U8 ?. j6 Q1 C
若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:
, J+ l6 |/ w+ A# u- p% W9 F$ Z9 ~% W8 [8 c) o: f7 |9 {
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;' D" l: ~+ O# z% O. x' {. G
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;8 a" S- J& z. R, h7 `, H
但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
3 L1 o1 p1 H1 x, o( e, J) B6.2 技术栈维度:选哪家芯片/云栈?
. G0 E* N* {4 P+ m) p! w) j6 x若目标是全球最优 tokens/$ 且不受出口管制:
3 `% q/ f6 D4 A. c; T% s. ~; P2 n, D
Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。
* ?! F7 i( e" z0 Q若在美国/欧洲,能自由采购 NVIDIA:. c8 F/ }* D# S2 S+ w- @" K0 S4 D
, v" q& x4 Q* q短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
5 m1 z/ `9 V* ?' z! m成熟的软件栈与生态,极高的 tokens/s/GPU;
3 y2 a0 W" X/ ]" V: e# j在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;- t6 n( S9 e( c
但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。6 v: [0 q# M3 S p8 \
若在中国或存在出口管制约束:/ w% c" l1 V1 J" b. f0 k+ j
) Z6 D/ h( @: J+ F/ ~% r昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
4 U# @' Y% Q% l, B性能上已能覆盖大部分 GPT‑4 类推理需求;3 u& S' J, N& j- W! v- d
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;0 F9 m$ G/ t( Q( D
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
) ~4 R% v: b% X! J" L建议配合:
1 `7 b: Q# p2 f0 j高效液冷(PUE~1.1)、- X: }; W% t, l g& A4 f6 c% }
大 batch、路由(浅层任务走小模型/低成本芯片)、; m6 C/ C4 F' h$ I% E" R3 S
强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。
+ f2 k" I& K* y2 ]' G" J/ X长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:
+ _2 {9 K: O, S0 B) M9 g9 F, E7 x# [( h U
数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];: X, \8 {' q+ K4 T
这意味着:
6 ?' K$ M( L# l' e& N, |优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);, [4 ?( Y) I+ \6 n
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
5 w0 T% Z- G$ @. A6.3 针对你关心的具体问题的简要回答" |& I! _" j+ ^2 s* e$ g: P
AI 数据中心建设 vs 运营成本的大体比例?. W. Z% Y, t b8 ~* d/ O
, T2 l5 j \! m. O
在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。* y$ |5 k# i W( c+ @+ f
其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。7 D+ z$ e' q3 G" P% F: |; G* t
中国、美国、欧洲、中东的成本结构区别?
, t7 d" v0 W7 r/ ]. Y* O
- r) R s/ k g$ B) F建设期:8 ?! L' L6 T- T) v
中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。; L. J a3 u9 U8 w
运营期:% h5 A8 @; } ~- T
电价:中东 ≈ 中国西部 < 美国平均 < 欧洲) u \8 c* k( v% Q& `( N3 D' q3 _
人工:中 国 ≪ 美 欧,中东居中。# D% [: g7 d( W2 I3 s4 M9 e
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?$ D% w e- m: ^
4 T5 Z% ?/ O! @0 y; O
对于典型 1 J/token 推理负载: ?' f6 |2 s7 \1 l: ?
美国 $0.30/kWh:电费约 $0.083/M token* W4 U9 e) q2 [' B. e* D9 k2 d
中国 0.3 元/kWh:电费约 $0.012/M token+ ?5 ~5 o4 b7 K8 p( h
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。+ a% v [6 g7 C$ r8 W
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
8 v+ ^# {: N+ u) |% O* k" s) ]1 f& c
; u! a$ ]" l1 f3 X% F+ a" G+ e4 h在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
+ }2 K- h1 l3 f全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
2 R, @7 j8 e& ]* r中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|