TA的每日心情 | 擦汗 2026-3-17 22:01 |
|---|
签到天数: 1133 天 [LV.10]大乘
|
沙发

楼主 |
发表于 2026-2-26 21:43:21
|
只看该作者
后来想了想,我让龙虾爬了一个分析全球AI数据中心建设和运营成本的报告,内容如下:
- `6 O, c: k: V7 K: N5 S6 P) v# M' h( i7 n# V. o
一、总体分析框架与核心结论
/ i8 o* ~! s' g8 G1.1 分析框架概览/ h6 U$ ]( O2 L+ A7 ^) G
拆分维度
9 K* v8 V3 T5 O l
8 p+ q) @1 [( f! j1 \ ?' t阶段:
/ L( E: q6 P1 V( U' j* h/ M建设期(CAPEX):土地/建筑、供电与配电、制冷、IT 硬件(GPU/TPU/加速卡)、网络与其他基础设施
" {3 Z) x* j& u运营期(OPEX):电力、水、运维人员、场地/托管、维护与更新、网络带宽等
8 P% L j9 t3 U区域:# _9 _6 @% j* @0 A F' T
中国、美国、欧洲、中东(以海湾地区/UAE 为代表)
+ ^5 {$ ]$ ?- `7 ^. Y! N4 h技术方案:7 |1 c9 I2 |5 f: A3 o( P3 @
NVIDIA(H100 / H200 / B200 / GB200 NVL72 等)
) |, f1 v- l- ]Google TPU(v5e/v5p/Trillium 等)
/ W P8 V7 ]/ s! Y! e, p. ]0 o中国芯片:华为昇腾 910B / 910C 系列、阿里平头哥真武 810E(PPU)
) O' a* o! J* }2 b6 Z# t算例基准# `% @7 [) _ N( W
- ?2 z3 U5 }( F, R: S: E8 |以400 MW 级 AI 数据中心为统一标尺(与 ChinaTalk BOTEC 分析保持一致)[1]:
; E w2 k1 m; q9 F1 i. F其中 IT 有效功率约 360 MW:GPU/AI 加速约 312 MW,CPU/存储约 48 MW
3 A* p3 O" q& y1 K y1 ePUE 假设约 1.11(高效液冷场景)[1][29]$ O' `% }( ?2 S. Z0 R* |
时间窗口:3–5 年运营期(与行业 TCO 分析和硬件折旧相匹配)[28]
! G B- M: r& z( }* |关键指标
8 n# H% b8 Y, A: Z- L
; k* K, x+ q" q d% j8 {$/MW 建设成本(含/不含 IT 硬件)
; w: U4 t2 X+ ?" E/ D% O: Y5 c4 C$/kWh 电力成本、L/kWh 水耗0 S' D4 y' A8 m
$/token 或 $/百万 token 的综合成本
% v8 {5 g" T; SToken-per-watt / Joule-per-token 作为能效基准[17][18][26]0 M2 @7 f" P8 P+ L( D
项目 IRR/回收期、吨位级 TCO 对比(自建 vs. 云租)3 Y! D" Y8 {) I5 Z$ x3 J
1.2 高层结论(供决策快速参考)4 N' v! V8 `! V" j; b
建设成本:AI 数据中心相对传统云数据中心成本翻倍
" g* V- c4 V7 {% \# |* l1 c' N6 T+ D( P
传统云数据中心壳体+机电平均约 $10.7M/MW (2025),预计 2026 升至约 $11.3M/MW[2][41]。9 ?* O) z" C! L0 v3 v
AI 优化数据中心(高功率密度 + 液冷)壳体+机电可高达 $20M/MW 甚至更高[41]。6 T3 u' H/ N/ j+ l- R
按 Accenture/Soben 研究,传统云 DC 为 $8–10M/MW,而 GW 级 AI 数据中心可达 $17M/MW(仅壳体+机电,不含 GPU)[3]。8 q9 Y k8 w0 ~6 F5 c# Y
区域 CAPEX:中东≈中国 < 美国≈欧洲 < 高端 AI 园区
; q8 C6 d$ r& V: y* ^
9 x# I: i% X( w7 `/ _, W中国:$5.5–6.5M/MW,400 MW 约 $2.4B[1][13]
9 Y+ l# |% ?; T8 t美国:$8–12M/MW,400 MW 约 $4.0B[1]" a: q8 L0 k# w' Q; L( \
欧洲:接近全球平均 $10.7–11.3M/MW[2][41]! @4 E2 q( i; j4 a5 L. B
中东(UAE Stargate 5 GW):总投资超 $30B,约 ≥$6M/MW[20]
2 ~0 `" h7 S6 @7 M结论:中国与中东的壳体+机电 CAPEX 明显低于美国/欧洲,同等规模下节省约 30–40% 构筑成本。$ {- a: @4 w& c0 G4 u& j/ y3 E$ ]6 ?
OPEX:电价与人工决定区域优势
" A. ~! Y3 Z7 `; {; N/ G# L) t. m- W/ A# K0 R5 j$ O6 U% k
电价(2025–2026 工商业大致区间):
# {4 Y" S7 _" V# f# _% V5 {# e中国:约 0.8–1.1 元/kWh ≈ $0.08–0.11/kWh,部分算力基地可通过长协拿到 ≈3 美分/kWh[12][73]
/ W) F! e8 ]1 B( v美国:工业用电约 $0.085–0.09/kWh[44]& B, F% L* W1 a+ V' E2 ^! K6 t
欧洲:非居民平均 €0.19/kWh ≈ $0.20+/kWh[45]
2 Z, i5 Z' A+ V ]中东/UAE:工业用户 $0.07–0.13/kWh[47]
: N) }/ X5 ~/ ]5 H4 ?人工:$ k* K0 s( E$ K/ z. W5 v
中国数据中心运维:约 $22k/人/年; N/ B3 `% g, h
美国数据中心运维:约 $120k/人/年[1]
3 m# A7 J! G, L* ^- ?& n- }结论:电价上中国西部/北部与中东有显著优势,人工成本上中国远低于美欧。
+ r& E1 U, }& E能耗与每 token 能源成本:能效差异远大于电价差异2 [7 C# ~6 l* Z4 m- o+ R( `, O& w. Y" M
. N0 }# @+ b$ L8 j" [
IEA:2022 全球 DC+AI+加密耗电 460TWh,2026 可能至 620–1050TWh[86][90];AI 专用服务器约 90TWh 量级[30][90]。2 t4 b s( }* S, o8 S0 J K) U5 t
大规模 LLM 推理能耗估算:H100 集群训练 GPT-3 175B 约 2.46–3.63 J/token(训练)[10][16];经推理优化后,Inference 端典型可做到 0.4–1.0 J/token 级别[17][26]。. G; [+ r C: R4 r# {
将 token 能耗约化为统一口径:
) H( W" ^; x, e粗略取 1 J/token = 2.78×10⁻⁴ Wh/token。若电价为:+ r/ g. D$ A0 f$ j1 A3 ?9 E2 ]
中国 0.3 元/kWh ≈ $0.042/kWh:电费 ≈ 1.17×10⁻⁸ $/token ≈ $0.0117/百万 token
0 ~) i$ d" m8 l: _美国 $0.30/kWh(题设):电费 ≈ 8.34×10⁻⁸ $/token ≈ $0.0834/百万 token0 _% e7 V. ?4 W' K$ @5 ]; f
对比:OpenAI GPT‑4.1 / GPT‑5.2 系列对外 API 输出侧价格 $8–168/百万 token[62],电费占比 远低于 1%,真正决定成本差异的是硬件 TCO 和利用率,而非电价本身。/ w$ d" T) p7 Y4 b w- m7 k
不同芯片方案的核心差异
% k" H5 X$ l; J1 v `
# C3 p8 ?& l8 U( _ Z& \! ?6 o: B$ {NVIDIA Blackwell/B200 & GB200 NVL72:
; g* u2 |5 W: i0 @ k# N5 i4 b单 B200 GPU 峰值 ~4.5 PFLOPS FP4/FP8,功耗 600–1000W[68][69]。
4 g+ I+ b+ Y8 L5 IGB200 NVL72 整机架售价约 $3.0–3.35M,72 GPU[34][69],GPU 约占整个 AI 数据中心总 CAPEX 的 39% 左右[36]。
# r: y) u8 {. KGoogle TPU v5e/v5p/Trillium:
9 b+ L2 w: B6 B* Z+ OTPU v5e 8 芯推理:约 2,175 tokens/s(Llama2‑70B,INT8)[67];功耗显著低于 H100,同负载下能耗可降约 5 倍[67][52]。
7 ?% O1 ]3 J/ |" E; ~# i+ fGoogle 内部披露 TPU v5 能效约为 H200 的 1.46×,Trillium/TPU v7 更高(约 2× 甚至以上)[52][65]。. [: x O, f9 f }: o/ O
华为昇腾 910B:
2 d# W1 g) A9 G7 {) u2 Z- LFP16 算力 320–376 TFLOPS,INT8 640 TOPS,TDP ≈ 310W[80][81][82];能效接近甚至超过 A100,在长序列推理上 token-per-watt 可超 H200[71]。* r \/ h: Z! k0 ^& e3 J0 C
单芯片成本约 5 万元人民币 ≈ $7k[60],显著低于受限版本 H20/H100。
3 w" i* T; [" s1 R* L阿里平头哥真武 810E(Zhenwu PPU):: a- v7 \" D, g4 W8 {
96GB HBM2e、700 GB/s 互联带宽[59][111],功耗约 400W 级别[102],整体性能对标 NVIDIA H20/A800,并已形成万卡集群部署[59][111]。
9 ]1 m) b, G" J" _结论:
) O9 W; v4 Y- n能效(tokens/J 或 tokens/W)排序大致为:Google TPU v7/Trillium > NVIDIA B200/GB200 > TPU v5e/H200 ≈ 华为 910B ≈ 阿里真武 > H100/A100。5 q8 D4 @4 B. T* G. U% ?
单芯片/整机价格排序:华为/平头哥 < TPU 自用成本(Google 内部) < NVIDIA 公版(H100/B200/GB200)。
2 U3 a0 G% Z4 N# z2 U2 Z% f1 l对中国市场,在算力性能足够的前提下,昇腾 + 真武 方案的 CapEx/每 token 成本有 30–60% 的价格优势。$ ~. s1 K* X4 M2 I( t" K& g0 E
自建 vs 云租的 TCO 与 token 成本6 t& N# j( |: N4 u+ d
2 k1 ^/ Q( l/ v7 i2 w
LenovoPress 对 8×H100/H200/B200/B300 本地 vs AWS/Azure/GCP 的 5 年 TCO 对比[28]:8 Q) ~! f6 w4 g$ m4 x
8×B300(Config D)自建 5 年 TCO ≈ $1.01M;
3 w* i1 e# r" \" j9 T4 X等价 AWS p6‑b300.48xlarge(24/7)5 年 ≈ $6.24M,节省 83.8%。
: g/ `$ n+ g0 Q* x$ k' \8×H100(Config A)自建对 Azure On‑Demand,回本点约 2,720 小时(~3.7 个月),对 1/3/5 年保留分别约 4,423/6,800/7,591 小时(~6/9.3/10.4 月)[28]。% \. u j0 }* R m9 T4 q
Token 成本对比示例(LenovoPress 场景)[28]:7 Z- B3 t4 _3 L, _( U5 R$ w j
Llama‑70B 推理,8×H100 本地:约 $0.11/百万 token
# o7 x+ E& Y Z$ v3 s" n4 zvs Azure H100 On‑Demand:$0.89/百万 token → 自建 ~8× 便宜。
9 c- B7 g% `! l% k- m同样 70B 模型,自建 vs GPT‑5 mini API(约 $2/百万 token):自建便宜约 18×。1 {/ f! _7 T% P0 G
Llama‑405B,8×B300 自建:$4.74/百万 token,AWS B300 On‑Demand:$29.09/百万 token → 节省 ~84%。6 {7 N' o; }( H* `5 s$ X
结论:0 M- }, @0 _0 O2 h
高利用率、长周期推理负载下,自建 AI 数据中心的每百万 token 成本可比公有云或高端闭源 API 低 1–2 个数量级。
1 ?" ]$ B4 O# E* @% s) bToken 电费占比极低,自建 vs 云租的差异几乎全部来自 硬件折旧 + 云溢价 + 运维与利用率。
1 @! ~$ w, Q. v$ ~$ e( e二、建设期成本分布:区域对比/ l. o7 [/ n, V; q ^
以下重点讨论 壳体+机电(不含 GPU) 与 全栈(含 GPU) 两层。8 N( q2 s+ J$ [) Z$ I
B) j: j D9 D1 W2.1 全球/通用结构(以 1 MW 为单位)
- m4 X! p8 t# S& {% H$ _" @. M) m综合 JLL、ConstructElements 等[2][41][40]:
' |6 x) b+ @' u( X* ^; ]. ~; ~1 O9 t( P7 [( V0 @( b
壳体+机电(Shell & Core)
! s: |% w1 |, d* G+ k7 ]& s ~& F5 s) q
全球传统 DC 平均(2025):$10.7M/MW,2026 约 $11.3M/MW[2][41]
+ q3 z4 z# g+ _其中按成本构成[40]:9 w/ ^& c% @( }, F3 k: T4 O& T
电力系统(变电、配电、UPS、母线等):40–50%- d/ W) a8 c- q, u, S0 I2 s
机械与冷却(冷机、冷却塔、管路、CRAC/液冷):15–20%
" ]% r% j: ~( N建筑与土地、结构:约 15–20%
7 v0 |( j9 k! ]# P6 v x* \5 a/ {其他(消防、安防、楼宇管理等):约 10–15%
' l; {1 ?1 V U3 TIT 内装与 AI 基础设施(不含芯片)
, C0 ]: x- ~ M+ i, N
% a, C8 l& f9 y$ r1 ]& z8 t高密 AI 集群内部装修(高密布线、机架、液冷板/浸没舱等)会在每 MW 额外增加 $25M/MW 量级[40],对 GW 级园区影响巨大。; M7 \' I- V' q% e: B
GPU/加速卡硬件 CAPEX
; G7 p. X8 U" k+ M8 d" @( T! e! S$ s- G/ N/ B
多数分析认为 GPU 占 AI 数据中心总 CAPEX 的 30–40%,其中 NVIDIA 单家毛利约等于整个行业 CAPEX 的近三成[36]。/ a' L1 @# c' C
2.2 中国 vs 美国 vs 欧洲 vs 中东:1 MW 建设 CAPEX. Z0 \3 ~* x) i
结合 ChinaTalk、JLL、UAE Stargate 等[1][2][20][13](仅壳体+机电):: F7 n6 g; D4 t( P8 m4 J8 g1 p
; p& f5 e" a4 W1 r# P) p& R区域 典型建设成本(壳体+机电,$M/MW) 备注
+ a8 N8 J J# }# O- I2 K; c% K/ m% D中国 $5.5–6.5M/MW 以西部算力基地为主,400MW ~ $2.4B[1][13]' B( n' q; y( ~' ^# s x# N
美国 $8–12M/MW 典型超大算力园区 400MW ~ $4.0B[1]
' x3 ]9 J. W% Q* e欧洲 $10.7–11.3M/MW 接近全球平均,部分核心城市更高[2][41]4 u8 X; H! ^$ F+ T) d+ q$ q2 a
中东 ≥$6M/MW UAE 5GW Stargate >$30B → ≥$6M/MW[20]
% v5 C* r h w5 s; f) a结论:/ ^9 I+ [* F! ^2 P" o) g
! q! @' _1 I! y3 a+ k9 `' k单位 MW 壳体+机电 CAPEX:中国 ≈ 中东 < 美国 < 欧洲。
# h/ U3 \. e4 V3 [0 w: m! Z若考虑土地、电网接入和许可周期,中东(特别是 UAE/沙特)在电力可得性和政府补贴方面往往优于欧洲,趋近美国甚至中国。
4 g5 u) R b/ @" i2.3 引入 GPU 后的全栈 CAPEX(以 400MW 集群为例)
7 Z$ V/ O) a4 @* ~以 ChinaTalk 的 400MW NVIDIA GB200 NVL72 集群为例[1]:
4 I/ y4 o4 T5 u/ t, C# C; r9 O! v$ \ ^% Q) G, p
假设:PUE=1.11,电力侧 400MW,中约 360MW 投入 IT;
' r' J- o: u% F# l. c6 k1 ^GPU 配置:( h0 g* F/ a- K- P2 Z) I; w; C0 X
有效 312MW 用于 GB200 NVL72,约可容纳 2,154 racks(每 rack 144 GPUs,对应功耗 ~145kW/rack);" u+ P7 C2 P+ u- l$ m
每 rack 成本 ≈ $3.0–3.35M[34][69];
( b4 K* X' _: e9 w; l9 Y4 l4 wGPU 总 CAPEX ≈ $6.5–7.2B 量级(ChinaTalk 抽样约 $5.6B 略保守[1])。$ C- n' J: R" `) c
与不同区域壳体+机电组合:
( X4 y2 O4 W! U* s# `: i0 X t# {' E7 K! c: N K
以中值估算:
' M4 [' k& L1 q' n* w, {
, l5 L x: P1 N9 w0 Q7 K; I: r# U中国 400MW:壳体+机电 $2.4B + GPU $5.6B ≈ $8.0B/ ~' C$ R/ Q2 {) u. b. i
美国 400MW:壳体+机电 $4.0B + GPU $5.6B ≈ $9.6B
" o3 s# a( {' k# _$ R' m. \9 ^欧洲 400MW:壳体+机电 $4.5B + GPU $5.6B ≈ $10.1B! Q: b! Z [ S' K* {. u p
中东 400MW:壳体+机电 $2.4–2.8B + GPU $5.6B ≈ $8.0–8.4B
5 t' B! x3 z3 l7 \, U可见:
8 K. \' ]" P: U' \# K. T. O6 ~. d' t
GPU 成本在各区域大致相同,决定区域 CAPEX 差异的主要是壳体+机电与土地/电力接入。
1 O) p! Q( ^" \$ G相比美国/欧洲,中国和中东可在 400MW 级别节省约 $1.6–2.1B CAPEX,这对 IRR 有直接影响。9 V, ~7 R" q+ ?; y7 ~1 C
三、运营期成本结构与区域对比' X3 u$ D1 e/ N: q
3.1 通用 OPEX 结构(高密 AI DC)
% `4 e* e! S& [; `结合 ConstructElements、IEA、Microsoft/Google 披露[40][86][103][104]:
8 `# N3 A9 @ P4 `- y0 \" f9 Q8 j
9 {- A6 ?- d* `电力:约占总 OPEX 的 20–30%(传统 DC),对于 AI DC 因 GPU 负载密度提升,可达 30–40%。0 h h% W O) m2 g! p- i
冷却与水资源:
9 T( U9 n7 O9 o' @5 Q; r能耗:传统风冷约占总功耗 30–40%[39];液体冷却可将 IT 与制冷合并大幅降 PUE 至 1.1 左右[29][115]。
) @. F. n# J7 |6 @水耗:典型 DC 约 1.9 L/kWh 水用量[105],每日用水可达 300,000–5,000,000 加仑 规模[100][101]。
/ D/ S- n) n) H1 J人工:视地区而定,在中国/印度/东南亚占比 5–10%,在美欧可达 15–20%。
. H( E: o+ g4 a7 k* |3 J( y托管/物业与维护:
: ]9 G; k- r% O' j$ i$ @+ q托管:高密机架约 $1,500/机架/月,标准机架约 $600/月[40][28];9 P w3 \1 l t$ _, W, R0 f8 s
硬件维护:LenovoPress 模型中按设备价 12%/年[28]。
& ^0 k& H) k% [9 A! m: Y3.2 区域差异(以 400MW / 3 年期为例)
! y9 z+ c8 Y0 v. S, e F使用 ChinaTalk 的电费与人工估算[1]:: v! V+ s8 g7 _# m5 ]
+ ^7 q4 P# f' n" d. W7 I) e
电费(3 年) – 假设 GPU 利用率 60%,IT 360MW,PUE=1.11:) m4 {8 b1 Y2 J+ L) z
中国:约 $0.06/kWh → 3 年电费 ≈ $350M
8 O; p$ T2 {+ x/ u! x* d美国:约 $0.09/kWh → 3 年电费 ≈ $600M, ]9 b+ G( P# n2 J' I
中东:约 $0.07–0.10/kWh → $400–550M) [) i: ~6 R6 N. c2 r+ B
欧洲:约 $0.20/kWh 以上 → 电费 > $1B(显著劣势)
& d& J+ v2 D7 k& o% k水费(3 年) – 以 MS Fairwater 站点 280 万加仑/年为参照[1][103]:$ m. i: ?( B/ B$ `$ Z
美国水价约 $5.18/千加仑,中国约 $2.57/千加仑[1]( |. E6 h! L9 t3 C) @% X. I+ {" r
三年水费级别:9 q5 \* g) O/ t' G+ _3 k
美国:$40k+
! o1 T; W& A1 h5 o7 Q9 q9 F中国:$20k+: L. E! [3 A' O+ Q- M5 m+ F: d
结论:水费是数量级上可忽略的小项,真正的约束是水资源总量与选址,而非成本。: a+ B7 r+ R3 i8 s1 _! i; s1 k
人员成本(3 年) – 假设 500 名全职运维:
5 K$ B) m9 k' ]6 |1 i美国:500 × $120k × 3 = $180M+* c4 N/ n- @. o! N
中国:500 × $22k × 3 = $33M+
# N5 U% h! Y( C8 ]差异约 $150M,规模与 3 年电费差不多,是中美间第二大成本差异来源。+ M" L9 u% H$ I# r1 {, X; i0 P
整体 OPEX 粗算(3 年) – 400MW 场景下:
3 n) w! ?. e( K1 W) X5 `/ j7 k6 y2 U$ P) b& B3 _2 m
项目 中国 美国
K j X8 E t; j电费 $350M $600M
: U3 j) T3 p! n, o/ C水费 <$0.05M <$0.05M; N& j5 X1 t/ g& v( j: N
人员 $33M $184M/ ]5 r( b8 h5 x4 s7 F# {8 ^$ m
其他维护/托管 同比例估算,地区差异主要体现在人工与地价 6 l& |9 f) N# C9 V Y7 w
结论:- m# R7 s; |. i0 q* T# j' _! K
" R8 F1 r. N* L* U0 o就 3 年期而言,中国与中东在 电价+人工 两项合计可比美国/欧洲节省 数百百万美元级,与整体 CAPEX(数十亿美元)相比不算决定性,但对净现值和现金流有实质贡献。9 X0 a7 K6 |9 ~" b. e" d* [8 I
对大模型服务商而言,更核心的是 GPU TCO 与 token 单价之间的剪刀差,而电价更多影响“边际利润率”而非“能不能赚钱”。) ?! n; |! M& |; F4 a
四、基于 token 的成本与利润推演) E0 ^- b# `+ Y% [0 W
4.1 能源维度的 token 成本(题设 0.3 美元 vs 0.3 元)
& D' u9 \0 h1 C, v统一假设:3 A" s% K# Z$ q( `
" h* j/ A3 W* W m' {$ ?典型大模型推理能耗:约 1 J/token(考虑 FP8/BF16 优化、Batch=256–512 时的能耗甜点[26][17][18])
& C2 A+ Y$ p6 f. a% p% y/ J2 i1J = 2.78×10⁻⁴ Wh → 每个 token 约 2.78×10⁻⁴ Wh, n+ r) O7 g$ c$ b7 U8 }$ E
1 百万 token:278 Wh = 0.278 kWh
0 N3 u; x2 K$ T6 y- a9 b场景 A:美国电价 $0.30/kWh
* ^- p; `5 J3 s; `9 _" @电费/百万 token = 0.278 kWh × $0.30/kWh! a6 l2 z! q6 l& N+ z& D' {* W& F/ M
≈ $0.0834 / 百万 token8 `4 o' U6 W4 \2 |
场景 B:中国电价 0.3 元/kWh ≈ $0.042/kWh
0 |& m) Z( s, @3 H电费/百万 token = 0.278 kWh × $0.042" t+ w$ z7 e, i! I i. M6 C
≈ $0.0117 / 百万 token% h6 G0 S2 c& S9 i j* x
对比当前 API 价格(OpenAI 2026Q1)[62]% |6 k, u4 G5 Q2 u
以输出侧为主(成本最敏感):
' U3 O+ |, f5 D) Z9 Y( J; {9 P ?5 w$ \3 D5 ?5 Q
模型 输出价 ($/百万 token)) k, x9 w: P a1 q6 p7 ]' v' e& o
GPT‑5.2 $14+ W) Z$ _! _+ u. l( t
GPT‑5.2 Pro $168; s" O( S+ h1 k7 f1 ~: D7 D
GPT‑4.1 $8
, x- U0 E# n' H# {3 W' o0 }GPT‑4o $10
; s$ a: M5 E! z; KGPT‑4o mini $0.607 q' p/ q4 ^! R; G; V
则:% O7 h7 w9 ]! x" g! b) d& e, x
6 ^6 O8 q) D3 o& [% T% ]4 L1 D
在美国 $0.30/kWh 的极端高电价下,电费占 GPT‑4o mini 收入的 ~14%(0.083/0.60),占 GPT‑4o 仅 0.8% 左右。
* Z4 t) u" P. }# z& h在中国 0.3 元/kWh 下,电费占 GPT‑4o mini 收入的 ~2%,占 GPT‑4o 的约 0.1%。; D( D- H, r! f, O. I1 E
相比之下,GPU 折旧+云溢价+开发/运维成本才是主导。
- x a; u+ k8 Q& Z$ z' [结论:3 {; e: L2 T b
即便在“美国 $0.30/kWh vs 中国 0.3 元/kWh” 的极端对比下,每百万 token 电力成本差异约 $0.07,与主流 API 价格($0.6–$168/百万 token)相比仍属“小数点后两位”的影响。区域电价主要调节“利润率边际”,而不会改变“项目能否盈利”的结论。& k# o6 `/ y- t$ K$ R9 Q8 _
8 m. `2 V' i f- [
4.2 全成本 per token:自建集群视角(基于 LenovoPress TCO)" m4 g. }( j3 v! P7 `
以 LenovoPress 的 8×H100 Config A 为例[28]:4 `. W7 [6 W8 w* R' M+ ~& _' J+ z
' R L$ Q& R3 f. G5 K( r: x5 年摊销下,8×H100 本地推理 70B 模型:4 X/ ?# w. u+ P) \# F! ?: r
小时综合成本(CapEx摊销+Opex):$12.08/h3 d& c: v2 n1 p3 E
吞吐:30,576 tokens/s → 每小时 ≈ 110M tokens
+ `3 O1 S; x$ G成本/百万 token ≈ 12.08 / 110 ≈ $0.11/M token: n6 L2 c, t+ i/ v$ h4 x) g
电费在其中的占比:3 s$ h+ K7 j. V4 q8 r) X
Opex 6.37$/h 中电力+冷却约 $0.87/h[28]
( | y9 l& M G, p5 J' S: _6 k1 X; a电费/百万 token ≈ 0.87 / 110 ≈ $0.0079/M token0 z) i9 f$ q4 Q1 }) Y4 ]
电费占 总 token 成本 ~7% 左右。2 |9 s; J; u, C
若将美国电价从 ~$0.12/kWh 提高到 $0.30/kWh,则电费约增 2.5 倍,对总 token 成本影响约 +10–15%。
, B4 v6 z( z: I. P7 B若迁至中国西北 0.3 元/kWh 或中东低价长协,电费可再降 40–60%,总 token 成本再降低约 5–10%。- y# ]( W! w$ B; H! x
6 X1 z& o& Z3 C1 |. _* g& W6 \. a因此:6 i1 x9 _7 Y! {) J7 t8 h |
/ i& V% M+ V y在自建集群场景下,电价对 token 成本有可见但非决定性的影响(变化量级在 ±10–20%)。
- | V& P; v+ i; C+ ?7 i在云租和 API 模式下,电价影响则被进一步摊薄,绝大多数利润被云厂商的溢价和 GPU 供应链吸走。
* v8 W: K/ [. h, P3 c. q五、不同芯片方案的建设与运营成本对比 v! x5 ?$ w2 Y g" l) a
5.1 NVIDIA 方案(H100/H200/B200/GB200)- w. b6 K- K/ [
CAPEX:3 @/ ^& u! u& x1 U
0 ]( {: U: c& T: V, v/ k- S! XH100:单卡市价 $25k–35k,8 卡服务器约 $250k+(Lenovo 配置价 $250k 左右)[9][28]。0 c" h P) C# b) ~0 t5 [2 k
H200:显存提升,单卡价更高,8 卡节点约 $280k[28]。
+ E8 F! S! I8 v" V/ QB200:Blackwell 代 GPU,8 卡服务器约 $338k[28]。% W3 P5 M# W( w' A( \' e1 ^( C
GB200 NVL72:
, i: ]8 m3 \1 V8 a每 rack 带 72 GPU + 36 Grace CPU,售价约 $3.0–3.35M[34][69]。( x5 ~* {4 O. |
冷却系统每 rack 额外 $50–56k[35]。
, F# m2 i3 T0 A: l- C% d6 C在 400MW 场景中,GPU 总 CAPEX 约 $5.6–7B,占总体 CAPEX 近 40%。
/ R2 B% B( I4 @4 J9 _OPEX & 能效:
L' z' s# d/ S$ B* X; \8 v* t# [8 W/ c Z5 B
单 GPU 功耗:
# h% [$ c/ |8 E+ ]3 FH100:TDP 700W;集群实际单 GPU 含服务器/网络开销可到 ~1,500W[16]。
' n+ j& B; ?% P2 ^H200:功耗类似或稍高,但性能/W 提升[9][10]。
9 O* A) u; J* S. S$ H# mB200:标称 1,000W TDP,但实测约 600W 左右[68][69]。5 F+ N/ t, U5 L) {5 L5 Q0 ~$ t
Token 性能:
( A$ t/ h$ m: |9 x i9 j- x8 dB200:官方推理基准中,可达 60,000 tokens/s/GPU 级别(gpt‑类模型)[68]。- l* }5 a0 F5 `
NVIDIA 的优势:
( I+ S1 I1 ?2 K
. \1 n( O( d! C软件栈成熟(CUDA/TensorRT‑LLM),易于榨干硬件性能,batch 与多 GPU 并行调度成熟 → 在同等 PUE 与模型条件下可达更高 tokens per Watt。
8 Y$ G) Y4 P) c: t4 H' l但硬件价格与毛利极高,从 TCO 角度,“谁买单 GPU 溢价”是关键——云厂商多半将成本转嫁给 API 用户。
8 ~, f+ f# m y! A* N" ~0 m5.2 Google TPU 方案
1 U3 h3 m+ w! P# n3 xCAPEX:$ S, ^* u4 X% i
5 m: A/ D) i% e' G单 TPU v4 定价约 $3.22/芯片小时,v5/v6 在云端按实例小时定价对外[52][54]。
+ T+ k7 b3 d/ WGSR 估算:TPU 的出厂 ASP 约 $4,500–5,000/片(Google 内部成本)[54]。' W* } u* q& u% p& h
8 TPU v5e 实例约 $11/h,而 8×H100 云价可高达该数值的 5–10 倍[52][54]。
: V: F ?: ]2 k9 Z6 V$ }* Y能效:
: } C, z. k+ M! Z" }7 G
: N7 b& Z9 g+ z- zTPU v5e vs H100:+ c Z! e3 A/ X# Z* _) Z
同级推理场景下,8×TPU v5e ≈ 2,175 tokens/s(Llama2‑70B,INT8)[67],H100 需更高功耗才能匹配。+ g: f6 v# T( Y1 t
测试表明 v5e 功耗约为 H100 的 1/5 左右[67][52]。! o$ s& ?: n0 _* K7 @: X# Q4 p
新一代 Trillium/TPU v7:
; \% Z. s, q0 o5 U3 n能效比 TPU v5p 提升 ~67%,对 H200 或 B200 整体上能实现 2–3×性能/W 优势[52][65]。
+ w" j2 m. k' ?& j( vGoogle 方案的特点:8 Y8 S, h [0 |8 Y1 v
! ~- t3 d. X2 F6 @6 n自用闭环——Google Cloud + TPU + Gemini,利润来自整体云栈,而非单个芯片;) c. b8 J; e% z5 E3 k
对外公布的 API 价格较为激进,TPU 方案在 tokens/W 与 tokens/$ 上具有显著优势,尤其在内部工作负载。' i0 Q+ c" X; H9 u ~- e& {# I
5.3 华为昇腾 910B / 910C 方案, ?" o) } g: k: i" O: B
CAPEX:8 Y ^; ?% F1 f
5 x* r$ E5 a( R4 b5 }/ h, {单 910B 芯片成本约 50,000 元人民币 ≈ $7k[60];910C 约 110,000 元[60]。- Q* M# B& ~. V8 Y, W
与 A100 对比:+ d+ Q+ Y* X9 r5 }: ~
FP16 算力 320–376 TFLOPS,功耗 310W,性能接近甚至略高于 A100(400W)[80][81][82]。. y9 Z* t4 h& T$ ?0 |" S
市场报道中,NVIDIA H20 在中国售价约 10 万元/片,而 910B 更便宜 30–40%[61][72]。: r Q7 [5 O, g; P$ }# a! j
使用昇腾构建类似 400MW 级别集群,总 GPU CAPEX 相较 NVIDIA 可节省 30–60%,视集群规模与供货条件而定。
! ]( D( x$ J: Q6 AOPEX & 能效:" {8 h2 L) G* ?! z1 c
5 r% m( t$ _/ X; l# {
910B 功耗 310W,FP16 320–376 TFLOPS → 性能/W 与 A100/H20 接近或更优[80][81][82]。
( }# _. a! m6 _& s9 b, C部分推理 benchmark 显示,长上下文(>4k token)推理时,910B 在 tokens-per-watt 上可超过 H200[71]。- y- Z; r4 Q' S7 k( C* O
在中国电价(0.3–0.4 元/kWh)环境下,昇腾方案在 TCO/tokens 维度有明显优势,但生态与软件栈仍在追赶 CUDA。+ Y( P; ~% b' K2 r/ p4 P" V* r# G
5.4 平头哥真武 810E(PPU)方案
7 T. d' l8 b: Z. ~8 m; qCAPEX:
9 I: w7 B! ?/ c7 S6 Y4 v* y. H' s
技术参数:/ G! w) C H6 q: {
96GB HBM2e,片间互联带宽 700GB/s,自研 ICN 互联,PCIe 5.0 ×16,400W 功耗级别[59][102][111]。
; b/ Y7 `% G& P1 v2 J性能:官方宣称整体性能超过 A800 与主流国产 GPU,与 NVIDIA H20 大致相当,升级代际可逼近/超过 A100[59][110]。: ]- L& M \. o) z c4 m, D v
价格:* I# D9 ? d F8 u
未公开详细单价;多个媒体报道指出“单位算力成本可下降 ~40%”,与英伟达 H20 有 3–4 成价差[74][112]。9 J& ^: W# c) h$ t6 Q! T# H
结合国内报道:6 F& R3 ^7 K5 G4 f" q2 q
2025 年出货量数十万片,已在阿里云实现多个万卡集群部署,服务 400+ 客户[59][111]。
! n8 m* }- I" ^* G9 Y数量规模与生态成熟度迅速提升,使得 真武+昇腾 成为中国公有云/算力租赁的主力基础。0 @' I0 a3 C" d3 m; j
OPEX & 能效:
2 z0 F9 _* Z$ X: C( A* ?- I8 S6 ]6 j! E
400W TDP、96GB HBM2e,使其在 高上下文、RAG、大模型训练+推理一体化场景 中具有良好性能/能效平衡;
6 ~* E3 k4 Y# N8 f5 L在中国低电价 + 低人工成本环境下,真武方案可将 AI 推理服务的综合 token 成本进一步压缩 —— 对标 NVIDIA H20,本地算力提供商可在保持 ~8–9 成性能的前提下降价 30–40% 仍保持毛利[74][112]。/ L1 h% o8 ?0 }9 h! I5 h0 \ L
六、综合比较与策略建议
" b8 \) J1 l" [# {* y# W6.1 区域维度:在哪里建 AI 数据中心?) G2 r/ L6 q3 }" w1 s6 h
纯经济性(TCO/tokens)排序(假设无政策/合规约束):
6 d/ f R; F/ x% t% \! \$ ^. W" O; r0 F: w' M7 K6 K
中国西部/北部(电价低、人力低、建设成本低)
: n/ S' I7 d4 m7 V! z% s& a* q中东(UAE/沙特)(电价中等偏低、土地与电力可得性好、政策支持)' h& i: h( a5 s/ b7 i
美国电价低但人工高;东海岸/加州电价上涨压力大3 ]4 r7 q' r9 U( e
欧洲电价高、审批严格,但接近高价值企业客户和数据主权要求
3 @& S( d6 A9 }0 m若以“美国 $0.30/kWh vs 中国 0.3 元/kWh”极端场景比较:0 ~/ Y( k% Z9 q2 E" @7 d
' D; ? ~7 ?) j' l! s5 R C3 i; {
纯电费/百万 token 差异:约 $0.083 vs $0.012 → 差别 ~$0.07/M tokens;- T# y5 P8 m- M/ `2 C
对比 API 价格:差异对整体利润率的影响远小于是否使用 NVIDIA vs 国产芯片、自建 vs 云租的差异;
& t# ]7 A* y# b0 H- s0 I" ?但在极高利用率的 自建超级集群 场景,电价仍然能在 5 年 TCO 上带来 10–20% 的边际优化,是选址决策的重要考虑。
) V$ ^1 @( q( Y+ {6.2 技术栈维度:选哪家芯片/云栈?
' g, F# a" `9 B: D( F- z若目标是全球最优 tokens/$ 且不受出口管制:
6 E7 ]: h, Q! h; c; K& b' E$ M
7 i3 u1 G4 z# g1 @Google TPU v7/Trillium + 自建 on-prem:性能/能效与成本的综合最优,但前提是可以直接获得 TPU 硬件与软件栈授权(现实中仅限 Google 内部和极少数大客户)。0 n ]+ l( Z4 A- W: M4 l3 y7 C
若在美国/欧洲,能自由采购 NVIDIA:2 w" ^* G, @. z
. M/ W/ x& Y. _+ G短中期内,NVIDIA B200/GB200 NVL72 仍是最佳实践:
6 L; ], m2 q$ X: P9 ~4 W6 F+ o. T# G5 j成熟的软件栈与生态,极高的 tokens/s/GPU;
; s( f% l+ v" D' B% v# d在云厂商/超大规模自建模式下,配合液冷与 PUE~1.1,可取得较低的 token 成本; R# g* O- j3 } a7 H
但要谨慎评估 GPU CAPEX≈总投资 40% 的集中风险。2 E% z% }5 c# L# Q }$ X- H
若在中国或存在出口管制约束:4 d+ b$ D4 o: H: _; }, p8 O
2 e' f9 L1 J z. P
昇腾 910B/910C + 平头哥真武 810E 是现实可行的主力组合:4 i5 H. x; @ ^3 E/ }
性能上已能覆盖大部分 GPT‑4 类推理需求;' ]& q. h( { g, a
单片成本显著低于 H20/H100,集群 CAPEX 明显更友好;3 v, H$ x2 a: |& o: B
软硬件全栈国产(CANN + MindSpore + 通义/Qwen 等),可避免制裁风险;) s/ W/ y( m. G2 \
建议配合:
& ^) ?. d9 U* f8 Q3 o高效液冷(PUE~1.1)、! [+ Y* Q& j2 b" p V
大 batch、路由(浅层任务走小模型/低成本芯片)、/ R5 ]& \( s$ i2 [4 G1 F \% S
强量化(FP8/INT4)与分层缓存策略,进一步摊薄 token 成本。) V$ l5 P" u& z& C; z& @# `( z
长远看,“tokens-per-watt / PCE” 取代单纯 PUE/FLOPS 成为核心 KPI:8 @- M, o' l, R* `7 a3 ^/ p
/ R+ K3 L) q) ?' e$ `0 t数据中心运营者应从“PUE 1.5→1.1”的设施思维,转向“每瓦输出多少有价值 token”的AI 工厂思维[29][118];
( L' R1 K$ B8 X9 l6 F; O这意味着:( l6 y+ @1 H' n( X* G3 _- e
优先选择 更高 tokens/J 的芯片架构(例如 TPU v7、B200、后续国产芯片);* Q1 w* e0 o2 ~ O9 t
精细化调优 batch size、路由策略、CoT 深度,将“energy-per-token”作为最优先指标来优化[17][26]。
5 r8 d# I# e4 t* O6.3 针对你关心的具体问题的简要回答& j' X& e# @& C
AI 数据中心建设 vs 运营成本的大体比例?
, U! x7 l! N5 O
: _" G7 I. y# {0 ^2 o在 5 年期 TCO 视角下,CAPEX(尤其 GPU)约占总成本 50–70%,运营成本(电力+冷却+人工+维护)约 30–50%。; N5 M/ e6 h% D0 n3 `
其中 GPU 自身 CAPEX 占到总 CAPEX 的 30–40%[36]。
9 `# P; h" z+ K中国、美国、欧洲、中东的成本结构区别?- a- C# Z0 V- s9 v3 {( f
4 O1 _' _7 ?) s, g$ g+ ?
建设期:
7 E" J8 Q8 _ ~中国/中东的壳体+机电成本明显低于美欧(约 5–7 vs 8–12 vs 10–11M $/MW)[1][2][20]。
0 l; D0 S8 ?8 Q: ^1 o运营期:
/ q4 a6 _: m9 d# g3 k0 Q5 @+ K电价:中东 ≈ 中国西部 < 美国平均 < 欧洲
5 Q9 v+ `- _& B% V9 [5 Z. u人工:中 国 ≪ 美 欧,中东居中。
4 x$ r8 F9 B: c" T# l. p J7 e+ l在美国 $0.3/kWh 与中国 0.3 元/kWh 下 token 成本与利润率?
! [7 L) q& x5 \0 M/ H
2 l% @. ^' f# x& D; O- O, p3 _对于典型 1 J/token 推理负载:
2 b: L1 W. A# n, s" T3 l- `) U美国 $0.30/kWh:电费约 $0.083/M token
% T. u7 z0 V6 a4 j# ?9 }7 w9 G中国 0.3 元/kWh:电费约 $0.012/M token* d. a; Z% f4 \' U0 a
对比 OpenAI 等对外价格($0.6–168/M token),电费无论在中国还是美国都只是利润表里的“小头”,主导因素是 GPU TCO 和平台溢价。' A) I% o* Q# C5 d! O2 D7 n
不同技术方案(NVIDIA / Google / 昇腾 / 平头哥)的建设与运营成本谁更有利?
. ~& i q4 Z" j* c. w
+ `! b+ E: o; F/ w5 L2 C8 }在可获得 TPU 的前提下:Google TPU v7 在 tokens/W 和 tokens/$ 上最优;
* O* d# ]8 w W4 R全球通用方案:NVIDIA Blackwell 全家桶(B200/GB200)+ 液冷,但 CAPEX 巨大;
( X) b9 B6 p' x中国/被管制市场:昇腾 + 真武 是当前最有经济性与可持续性的路线,综合来看能把 token 成本压到 NVIDIA 方案的 40–70%。 |
评分
-
查看全部评分
|