TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:- z M1 P* S4 C3 W
2 j8 u2 S. Z" z3 O+ \1 H
一、总体分析框架与核心结论" s& G) R) E8 `9 i! m3 y: J, H
1.1 分析框架概览
9 M& z a2 x4 l拆分维度! E% F9 N4 [# i; V: W0 |
) D7 b" Y. P. j3 [* M( m; o" C: E阶段:
. D! j7 P" X* O3 L1 Z, y2 j( p3 H建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施+ w& c6 x) l: |3 g% Q8 x- q
运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等3 K0 ]" F4 m0 |( F
区域:; Z ?# Q6 g- K6 v; L- {6 U9 \1 J) `
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
/ b& u8 p% _7 t$ M3 B技术方案:
8 i1 x8 F9 P' @& S# ENVIDIA(H100 / H200 / B200 / GB200 NVL72 等)
; r3 Z. F, E& L' X5 GGoogle TPU(v5e/v5p/Trillium 等)
3 a- [% ]6 k; V, \6 W中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)( P0 x8 L+ f( ?- p0 o5 j3 W
算例基准; }8 k+ B0 L& u. V
/ ?+ ?( Y- h/ J2 _7 K
以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:3 t4 U5 m2 L2 p2 a# a
其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
1 j4 h2 |! ]% E* f5 m* R1 kPUE 假设约 1.11(高效液冷场景)[1][29]
: w0 j2 B& f% `' o8 v+ Y* p, |/ j2 C. [时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]. V7 P; I h' p5 @3 h2 b7 K% t
关键指标
' Z+ L- I- e$ { \# T& j0 S- Y: I" t( V
$/MW 建设成本(含/不含 IT 硬件)
" g, z" z# |$ u$/kWh 电力成本、L/kWh 水耗! k8 Z" L, S8 |. ?8 K$ R5 w! w+ \
$/token 或 $/百万 token 的综合成本) D8 ]7 [% R: e; e; ]
Token-per-watt / Joule-per-token 作为能效基准[17][18][26]- Y4 U: S7 A3 \' [0 \
项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)( ^- j: _2 D7 o+ x5 [0 Z2 ?# H! f( g
1.2 高层结论(供决策快速参考)
7 B3 U* P/ U5 u, Z, [' R9 I9 e建设成本:AI 数据中心相对传统云数据中心成本翻倍+ [4 w9 P4 `0 A Q/ R+ q9 o& _
3 m: G E& R# E% s( O. E# E! l传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。
5 B% c& h3 W( R6 ^: C5 OAI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。: X3 E5 q4 [2 `6 L/ H1 H! `1 r
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。
# N" m# t# e- a& g$ h+ V! u4 \区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
- y3 s! Z; v* i& N* ]+ ^
' {+ [2 I0 E; G3 M7 ~" X中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]9 s( }- h5 U4 M# D& \7 L" o! I0 @
美国:$8–12M/MW,400 MW 约 $4.0B[1]8 s6 P8 [0 O' O# I
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]
; g. P2 ~2 ]( [# T# O# g0 w% y中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]6 A& l3 R; R- R0 x
结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。, y. R% c* M% B/ g" d, j/ y
OPEX:电价与人工决定区域优势4 r3 N$ s {3 X: r# V. ]) @: p9 a; Y
1 O9 i5 i) W- U# ^# d# v% H
电价(2025–2026 工商业大致区间):+ w- E$ G. ~7 W+ u! e; m& e- N
中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
: b# h/ g$ ^9 F/ u5 t( q美国:工业用电约 $0.085–0.09/kWh[44]
9 I3 u7 [, I0 D: d Q' m1 K欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]
& d C7 [8 r2 R Q中东/UAE:工业用户 $0.07–0.13/kWh[47]
9 g" R' T. e8 P1 y人工:
) D. X( j! x9 o3 i" O; M, X- b中国数据中心运维:约 $22k/人/年2 d& `) J! n/ |3 Q8 c
美国数据中心运维:约 $120k/人/年[1]# {4 w% J3 u% a2 {1 O4 j) A
结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
% _* O" t5 h$ a, h# {能耗与每 token 能源成本:能效差异远大于电价差异
1 S# ?! f8 L1 W l" J& E! [1 i9 s* G6 O
IEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。8 C4 h$ B: R6 I0 f- u
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。) n! R* |) B/ Z( d
将 token 能耗约化为统一口径:
# o' Q C$ @/ b1 Y K9 _, d粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:- b) h+ T& ^: ^9 @
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token% R8 C2 A% z% |6 p# D
美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token# ~6 c% c) M, v9 B" F
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。
$ L. E5 @1 m O+ U! X6 U- \不同芯片方案的核心差异6 k7 @$ f w. m- K$ i3 _
% y3 A9 P% Y3 E p8 w# a s2 O ` g, qNVIDIA Blackwell/B200 & GB200 NVL72:1 d. B& t, l' Z6 c, I8 X; \4 `1 G
单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
) s* j9 c6 v8 m& sGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。" D( T- Y9 y6 I
Google TPU v5e/v5p/Trillium:, k. s+ G( i: @% ~- n ]! G+ {
TPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。4 S6 [, }! Y3 e+ e$ ^2 ?! G8 F2 _
Google 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。2 I" ~( H/ d& J; |: D/ m
华为昇腾 910B:
- m9 k! i9 V0 D+ D, \FP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。
9 p/ R8 ^5 u r/ K7 [( _单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
! A5 L! N3 N6 e2 m5 d! K# b阿里平头哥真武 810E(Zhenwu PPU):) F/ X1 ]9 d2 q. X+ P
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。% b/ ], j' a& t# ~ ]+ ^, ^/ j
结论:7 R, @" S/ z: m
能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。! D9 ~ A9 g( D) V7 N4 M. @$ ^+ ?* Y/ X
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
2 A. J& e$ ~# c; R对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。7 _: z [; A9 X
自建 vs 云租的 TCO 与 token 成本2 p5 v* A: f8 d8 I3 {2 o2 h0 b7 t
) j+ E8 b3 \6 V; Z' `6 WLenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:
1 t, m4 q8 _& z1 P0 \, H7 A. F l8×B300(Config D)自建 5 年 TCO ≈ $1.01M;
" @; W& \# j+ ?' ?7 X- `等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
) `0 J i8 P8 T8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。6 n2 P" n$ y( G# T( T0 Y; m! [" S
Token 成本对比示例(LenovoPress 场景)[28]:
4 U7 j8 R' c) ^. s& w# jLlama‑70B 推理,8×H100 本地:约 $0.11/百万 token" i! W+ g- d3 x$ G
vs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
& X2 L8 B& e- y9 x+ Y, @3 }+ f同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。
6 E6 G/ S$ J0 u3 j+ p- g# A6 fLlama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。
& u3 j& W$ s1 t+ ~0 |8 \结论:
g: o, h, r( g* n- E高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。
/ P* a, q9 T+ dToken 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。* h+ ^- r8 E; k# ^
二、建设期成本分布:区域对比' U$ b5 M, L f: a* m% Z1 ^
以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。
+ E# [/ D) O! b6 N* B8 m/ I) }' _5 D: A5 T& A
2.1 全球/通用结构(以 1 MW 为单位)# {, n3 t5 ^2 X& G2 G
综合 JLL、ConstructElements 等[2][41][40]:9 ~* \% N8 t! ]4 M/ J
0 ^: a1 Y! n4 o( b" ?* W6 @ M' V壳体+机电(Shell & Core)3 a3 w1 j+ G2 M6 y9 S5 ~2 k: K* k
. _" l; M1 z" t" h* O0 f
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]' Q5 y- Z: q) M: T% R' Q ^4 a
其中按成本构成[40]:! R4 r4 S: j- t, }& J y
电力系统(变电、配电、UPS、母线等):40–50%3 t+ j$ E% y- e% p# e9 X8 F7 R6 o
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%* n. K5 Z1 y. i
建筑与土地、结构:约 15–20%* b h$ h" `8 w& o w
其他(消防、安防、楼宇管理等):约 10–15%; G8 @2 O' `3 `
IT 内装与 AI 基础设施(不含芯片)0 y4 U" |9 o$ O0 W% k- G
* F! l# V6 D1 z* K9 h
高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。) k* n% s& m6 w# _9 x' b7 N
GPU/加速卡硬件 CAPEX
3 u+ m6 K8 P: t+ u$ N4 S0 F, X' _' c2 q2 |3 f- H$ v
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。
; o0 U& \: Z: ]2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX& _" }! P* b9 x6 S
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):
+ X" a: i% |7 L0 j; v2 [- P* x9 s/ i: f5 b0 a6 N& D8 F
区域 典型建设成本(壳体+机电,$M/MW) 备注
; z2 S2 O. \' P0 ]9 m- x中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13], T& H! f; ~% u& u" b v
美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]8 Y: M* _% t7 q& O1 A
欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41] s3 i: X2 P& a* {
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]7 D6 N5 c$ g; w
结论:0 z$ l' J H5 u5 c4 J6 G
- M2 G$ V' C+ R8 J
单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。8 C( j( t2 J5 ]8 |4 Q. p
若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。1 q5 p% ]/ B' n# @! J& K
2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
# U: Q) `, s2 n以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:
. M- a% ]7 f$ y1 y0 I
2 Y: l8 [, r+ N( m' h% l+ i4 [假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
2 v/ U' J9 [7 y8 l. l$ q; SGPU 配置:7 N8 h) ^- i4 Y0 V
有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);+ \7 ~9 L0 T+ ]
每 rack 成本 ≈ $3.0–3.35M[34][69];
9 M1 v6 v# D6 }" d+ pGPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。
! B' G/ O$ k4 Y7 ^# T与不同区域壳体+机电组合:
/ C0 m3 s$ ]/ a9 c9 W: s* q$ i! ?+ u# ~2 [8 D0 A
以中值估算:# Y3 @' @6 p7 h% ^
8 U8 ?0 L7 b4 M2 P+ C! |中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B
$ t H$ ]3 b- C S. h) j美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
8 U+ c9 u @* e4 K# S欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B
! K1 z i; _. I中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
& G5 Y) p0 L9 h7 N9 G0 s9 u可见:4 l3 ~) v" B# o9 v, t1 y: ^
# F7 _5 m5 B& [) c+ X
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。- t/ f2 F) i" A( ]2 u5 p5 [+ Y! e5 z/ H
相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。, Y& k- W d V! [
三、运营期成本结构与区域对比
( z, A' ^1 G- Q# L% y2 N3.1 通用 OPEX 结构(高密 AI DC), ?6 ]3 B7 e) t! }6 u) |
结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:, K. }4 g+ M$ `' D/ O6 o
$ x! s+ o" M1 q$ U电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。. \' z" z$ E/ x, |
冷却与水资源:4 i$ {! `" x- \# W4 V, z: r
能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。: Y/ i, o! P* P7 o/ Y
水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
e$ |- u7 I) k, I2 v人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。0 V& h+ t5 K) b. `3 i H, {$ z
托管/物业与维护:6 I& x& h# c* a H+ ` R
托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];& M3 A. g" n: T' N$ T0 M$ P) k0 k
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。$ v& s. h L- N+ M9 Z: f* Y) G1 |
3.2 区域差异(以 400MW / 3 年期为例)
4 G) ^% x9 t( @" d' K使用 ChinaTalk 的电费与人工估算[1]:
4 t1 z2 K ^; `; P$ r4 p# y6 V+ b2 v; F
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:
. F2 o5 t9 m Y& z7 J3 r中国:约 $0.06/kWh → 3 年电费 ≈ $350M$ J! `1 T- `9 y- n" u. T7 Y
美国:约 $0.09/kWh → 3 年电费 ≈ $600M7 Z* b1 P* Z! \) y3 O
中东:约 $0.07–0.10/kWh → $400–550M
" X& w% d: {, k. H# m& _5 Y欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
# K# q9 q2 m& \9 ^; `$ p水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:% y; _' z0 k3 ~; L3 y
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]
% I6 r9 U0 t. Z三年水费级别:
* X! r# s- Y9 Q3 C: t5 b* R/ E美国:$40k+* H$ s9 j) Q! k0 b; d- Y
中国:$20k+, `- q2 l- u+ [1 L$ _; n/ }/ _0 P
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。
0 [, X0 d% J/ u! M$ p人员成本(3 年) – 假设 500 名全职运维:
3 a& a2 r0 T* I$ U6 V: ]% d美国:500 × $120k × 3 = $180M+! H( e1 j5 `% O4 j
中国:500 × $22k × 3 = $33M+
, E7 |" H2 \0 s9 f) V# P差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。
2 m0 g' y% P" G& |4 q* Z, V整体 OPEX 粗算(3 年) – 400MW 场景下:
# k7 P! E/ G( C3 Y0 ] g1 v @( K% o& O0 ?
6 x, M2 m7 K# C# i/ z! L项目 中国 美国0 {$ f$ z" n4 t/ A
电费 $350M $600M
3 k; o+ u4 A8 I水费 <$0.05M <$0.05M3 k. T4 d9 P/ D
人员 $33M $184M$ q6 I' C# D4 h3 z! U. O$ l
其他维护/托管 同比例估算,地区差异主要体现在人工与地价 0 ^* D& ^, K/ g2 A* m! ^
结论:
4 m+ C3 T5 P5 c7 n8 ]
9 s, }9 }. I8 `! \" k0 R Z就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。6 n: V; e; J( G U% r% N& \/ }
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。2 q; Z# V' A2 w/ ]% h, Y
四、基于 token 的成本与利润推演
" x+ ]1 e$ z1 u/ h8 a+ w4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
/ a. ]* ?9 E9 d统一假设:
3 V9 g* }" @# i! C" }- U4 N K0 j& Y( s7 i; ?7 c+ y# h
典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])! P$ I) }7 T6 D' @
1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh+ m% O g( f; g: w0 v
1 百万 token:278 Wh = 0.278 kWh
- j9 I( J) F1 }场景 A:美国电价 $0.30/kWh* q/ s- z, r4 _: O0 J* V8 O0 e9 \
电费/百万 token = 0.278 kWh × $0.30/kWh3 Y+ P$ S4 O, G) a
≈ $0.0834 / 百万 token
5 i; x1 a# ]0 \场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh( M( Q, Q2 H. d
电费/百万 token = 0.278 kWh × $0.042) e1 a$ Q7 }) C2 ]8 J
≈ $0.0117 / 百万 token6 H; ^4 p' D& i, n
对比当前 API 价格(OpenAI 2026Q1)[62]! I( ?2 c& V" C$ c
以输出侧为主(成本最敏感):% ]3 Q0 i0 V5 P" U) c
% r7 O) B0 C' B/ d f模型 输出价 ($/百万 token)! ~5 O5 @5 ~* d
GPT‑5.2 $14* ^& `- f) B0 v) s! J2 c
GPT‑5.2 Pro $1683 q0 T0 Q" M3 @' c9 u: S
GPT‑4.1 $89 @% y" v' q* c6 f3 G5 Z
GPT‑4o $10
( Z# `+ W* ]0 Y9 f$ z4 M8 N* zGPT‑4o mini $0.60! Y( J. b4 }3 b' h
则:8 ^$ W- C2 ~! {0 ~4 h
. V" p! R) P" U- R6 `7 ^ |% ]) S. r在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。; h4 R+ P, w. h" S# \
在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。
9 U: n2 z+ h* E, J9 K/ E2 w) ^. Q相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。! X U' o! k) r n
结论:" i% W, _5 y* t/ S& f
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。; |4 K8 x" Z- J& J! H# S) i; u9 `
: V P, Y8 B% _6 c4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)
& [, ~- h3 [- O, H( c, h: l$ N以 LenovoPress 的 8×H100 Config A 为例[28]:
3 L o. }5 q# f( p* g8 [5 S9 n6 c7 c& r3 V% ~( [ [9 `+ A
5 年摊销下,8×H100 本地推理 70B 模型:" p. n1 Z; |3 g% X8 T+ L9 p
小时综合成本(CapEx摊销+Opex):$12.08/h
& `; K; ^: r8 L* s吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens
+ i& Q5 c }+ @9 \成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token' h5 J* m4 \+ V
电费在其中的占比:- B& O+ Q5 e- s
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]1 ?- P1 B! ]% ?) A$ K
电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token: |& A6 @# A5 r1 Y. r6 v
电费占 总 token 成本 ~7% 左右。; e% k/ g# d j! r1 C: C4 c+ g
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。6 J( I. u: }7 h3 y+ y# ~# z
若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。
6 \# B1 \( z0 w! H
/ d( Y) b4 n+ j& k# ?$ ]# C因此:; ]$ S5 z/ D" l1 j- P
+ z) Z# M+ k: L2 T' W
在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
7 ]8 {( ~( _# f }在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。5 H; X( ~$ h1 i* y) q5 c' z8 j* @
五、不同芯片方案的建设与运营成本对比$ n$ }1 C: a& u0 ?7 |
5.1 NVIDIA 方案(H100/H200/B200/GB200)
7 h" U, u+ b( \+ P' G3 ^CAPEX:
/ M6 Y$ n+ Z% G! z u, `5 Q
3 ]# D/ U. i o. M; BH100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。, M# r$ @& [8 l9 `7 J
H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
, o5 t5 w+ R# H* L; d4 F% M- jB200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。
$ N6 c2 o- A; l. |6 j& nGB200 NVL72:# B q+ J. b% y0 R0 V, B2 T8 \
每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。
& b6 z4 V" R" n5 D冷却系统每 rack 额外 $50–56k[35]。
0 T5 r, I4 ~. Q7 E R在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。" ?8 B8 z3 }/ y. c# l o
OPEX & 能效:% ?, t+ Q+ _3 v5 r* T1 q. | T3 N
+ F& e: g: _2 V) e
单 GPU 功耗:! D3 [% ?9 v% `9 a- W2 b+ }
H100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。 h. w2 J) i# w. T; b. |2 f; K/ U3 s
H200:功耗类似或稍高,但性能/W 提升[9][10]。
7 U) i' _4 P' x G3 E1 YB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。) }# e- S k2 u- ?% b5 r
Token 性能:3 t, r+ T. b7 N# K Y# F4 Y& g
B200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。8 k9 R, c+ G# u
NVIDIA 的优势:- ^, S0 ^! G7 e. s
; i$ [; b" K0 O t+ x* f" ~% S
软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。$ L8 l5 l O3 v$ ^1 o/ M8 j
但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
9 r! N, W, S/ K. b9 V5.2 Google TPU 方案
, D- \5 g/ x- i. u$ {8 l4 nCAPEX:
4 t$ Q! Z4 _1 \- P1 X& h9 ?& M0 U$ @9 m8 x3 L) A8 F) ^! H
单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。0 d8 P9 U2 V$ P `. P1 F# [( s
GSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。
- z$ v0 z5 {7 O" s) g& ~8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。) s! Y [( H, c. S2 P
能效:
2 V- _* {* {) d& ~/ a( D) K: m
, b. o: E, L3 p( y1 n7 KTPU v5e vs H100:
/ s& P& |: \& v2 X H$ t- v# n同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。
4 ]( h4 v5 K: R' ~" O测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。
: N, `" a+ t1 n* X- X: a( ~' s" o新一代 Trillium/TPU v7:: j; q5 `7 E" z5 m# j
能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。/ t" I+ l: ?( {3 ]
Google 方案的特点:
# O: s) y4 S2 V
, [: T: w+ J( s) B自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;
, w* A" L1 t# Q- B+ g% R n对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。: z+ B2 _& {, z1 }
5.3 华为昇腾 910B / 910C 方案
3 r' L. A1 ~( W) ^) z4 u. mCAPEX:& q7 ]+ z9 s& V5 _
+ [- D4 k$ R0 _ t6 W
单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。
0 y' V0 b2 C: g. T9 M$ y. N6 e与 A100 对比:
+ ?) [ p9 W1 g5 R: ZFP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。
) R. O: E& ]/ F, h" H" w. u. P. v6 k市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。& z7 t. ]1 R, H/ b9 c- U9 S- h! p
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
?4 H8 l/ Z( COPEX & 能效:
; G* m& U9 g, e2 q( B; t. C! o& m" A& ]. N9 h* i& P$ B) `
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
3 Z- v' b& ]/ b) f部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。9 P; o2 _9 M. z3 L
在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。+ `$ [( w3 l# V- y+ {1 R9 x+ a
5.4 平头哥真武 810E(PPU)方案
; N4 l0 h, [3 i6 s0 F$ f& bCAPEX:
: _- v. W" N: w7 R3 T$ ~4 ` p4 y* T
技术参数:- ? F; v3 W$ F/ m' S' O* p3 a6 [
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
0 ?/ A: ]$ d$ A W+ x: I8 f性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。# x- d/ x# e$ K# |
价格:: f# z8 X% V8 W2 S
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。" @6 E& _" n% [1 l: @
结合国内报道:
* J9 s5 N3 p7 {. \1 i2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
! ?% S& v7 N* Y; k7 [* m' _数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。- [' T$ T6 ]1 h3 U
OPEX & 能效: K/ i# O6 H3 w5 e S9 c6 a
8 @8 g8 `; R: Q# A! E, V' a400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;1 n, o* i$ V' c* M$ S- t% F
在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。* P- G: @) T" w* U& Z- D, g! k
六、综合比较与策略建议
- L3 W/ f; j7 Z# x5 p1 A- R, e6.1 区域维度:在哪里建 AI 数据中心?2 z2 ?0 {: C- v& V( T' J3 F3 i* |
纯经济性(TCO/tokens)排序(假设无政策/合规约束):! c% u3 z0 x: J
! S1 w( f7 a. ?8 ]* ~! f# C
中国西部/北部(电价低、人力低、建设成本低)$ V- E: T! R+ X, r( P
中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)9 b8 ], [$ C; C: ]3 ^1 Q: w
美国电价低但人工高;东海岸/加州电价上涨压力大
! T) P4 o5 _# u6 G! T% l. ^6 _# j. {# E: I欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求
& r( s6 j( L& _+ i0 z若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:5 \5 B& K$ Q0 s# K
; b+ p+ ~( P+ v- C# y x; f; s纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;' U* g4 v8 P/ Z. _
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;+ C( y( ~: I+ b- T
但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
1 i/ X+ i5 q" F% W( I6.2 技术栈维度:选哪家芯片/云栈?
2 K6 W9 M3 A7 ^9 T# R: ?- h若目标是全球最优 tokens/$ 且不受出口管制:( y! ~1 Q% P8 b6 P
$ B# O3 }3 a0 }$ J4 c9 T2 ?8 IGoogle TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。
" e; Q; p5 T* M5 h若在美国/欧洲,能自由采购 NVIDIA: k0 o& l' u5 J, O0 v- N" P
! X7 h' A! |8 f5 ~短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
! ~* ~2 y9 F2 Z成熟的软件栈与生态,极高的 tokens/s/GPU;
) Q6 U/ K) G6 E9 O在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本;
5 g* E7 \- e* j, l* s但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。; g. h, g) n, c! p
若在中国或存在出口管制约束:" v$ I* F! T9 b+ w1 K* Z1 s
- T- ^1 H9 d9 g* N昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:
5 C- F6 S, X& z9 M3 i性能上已能覆盖大部分 GPT‑4 类推理需求;6 [, r5 d9 z0 n7 }! n7 ?7 r6 J
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;, d1 \( [. f" W$ D
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;
% d) R1 E7 A; S$ a! X1 o N5 m建议配合:
0 Z5 T. S4 @1 ^3 C+ M7 f) f# I高效液冷(PUE~1.1)、
; K) S- C$ h$ H. B* Y大 batch、路由(浅层任务走小模型/低成本芯片)、8 x# Q! B6 z3 v" m% i/ z
强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。% i) [8 j9 D* B5 p
长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:% x; d- |& @6 b+ H2 A% d
8 ]' O! C, X4 w, C' i( z
数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];4 F7 T' O' h# Q( ~
这意味着:
, u5 N+ ^7 x) H5 {6 l" c# n* H优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);
c( C8 Y! a; k9 ?' |$ U精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。+ F& u9 J/ k" z4 U. T
6.3 针对你关心的具体问题的简要回答$ E K# s2 L* b
AI 数据中心建设 vs 运营成本的大体比例?
9 Y$ t1 c' z) p/ g7 G
" L/ v2 B q. q2 A在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。
3 F+ n0 i) n) l4 V$ y, D; O其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
1 q0 t" q. A) v( M7 v4 [ ~中国、美国、欧洲、中东的成本结构区别?
2 w5 y7 p. K" q, \' j- R. ^
' O: d- F( ?) `; j. v; B. ]3 E建设期:
8 g1 P+ u$ `; e: C! {& F- k# {中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。, |4 o# \ d4 q; `+ O) X" b9 b
运营期:
' e6 {0 H& g4 ~( j& H- J; U电价:中东 ≈ 中国西部 < 美国平均 < 欧洲
5 i' b! p" Q8 t! n9 j人工:中 国 ≪ 美 欧,中东居中。 H/ @, g& U: W, w
在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?/ L1 s9 I+ M( t+ A/ ^; b
- b& e3 Q! l( h/ ^
对于典型 1 J/token 推理负载:' V2 J. I& e3 E, N# z4 B
美国 $0.30/kWh:电费约 $0.083/M token* W, m% W' g/ ?3 M( K( I
中国 0.3 元/kWh:电费约 $0.012/M token
2 p% r f1 Y. C! v3 Z对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。% B+ _7 ?6 D L4 z2 B+ ?
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?# g% {4 G$ v, @- g6 P% ?
; C7 A7 x8 T' i1 ~
在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;* E% @& d1 ]8 X" A! R3 c7 c* H
全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;# }" s/ e7 t7 N; G Z8 y o
中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|