达索时代
AI FACTORY
算力工厂运维大屏
苏州 · 杭州 · 包头 · 成都 / 北京云调度中心
--:--:--
--
全部基地
苏州
杭州
包头
成都
苏州
杭州
包头
成都
实时刷新
GPU 总数
0
在役 GPU(5090/4090 各半)
在线 GPU
0
在线率 --
实时总功耗
0
MW
含制冷 PUE
实时电费
0
万元/h
今日累计 --
平均算力负载
0
%
GPU 利用率
综合 PUE
0
能效比
活跃告警
0
严重 0 · 警告 0
三大基地算力概况
⤢
算力网资源层 · 异构算力供给
⤢
指标体系 · 数据采集
⤢
采集周期 实时·小时·天·月 | API · 批量上报 · 在线填报
机房环境监测
⤢
冷通道温度
24.0
°C
机房湿度
46
%
在线机柜
0
架
网络时延
3.2
ms
算力利用率
⤢
苏州基地
利用率 95%
GPU-01
research
training
inference
finetune
multimodal
rl
research
training
inference
research
training
inference
finetune
multimodal
rl
research
training
inference
96%
GPU-02
training
inference
finetune
multimodal
rl
research
training
inference
finetune
training
inference
finetune
multimodal
rl
research
training
inference
finetune
94%
多负载智能编排 · 平均利用率
95%
,满载运行
杭州基地
利用率 87%
GPU-01
multimodal
rl
research
training
inference
idle
finetune
multimodal
idle
rl
idle
research
idle
multimodal
rl
research
training
inference
idle
finetune
multimodal
idle
rl
idle
research
idle
88%
GPU-02
rl
idle
research
training
inference
finetune
multimodal
idle
rl
research
training
rl
idle
research
training
inference
finetune
multimodal
idle
rl
research
training
86%
平均利用率
87%
· 调度装箱持续优化中
包头基地
利用率 66%
GPU-01
inference
idle
finetune
idle
multimodal
rl
idle
research
idle
training
idle
inference
idle
finetune
idle
multimodal
idle
inference
idle
finetune
idle
multimodal
rl
idle
research
idle
training
idle
inference
idle
finetune
idle
multimodal
idle
68%
GPU-02
finetune
multimodal
idle
rl
idle
research
idle
training
inference
idle
finetune
idle
multimodal
idle
rl
idle
finetune
multimodal
idle
rl
idle
research
idle
training
inference
idle
finetune
idle
multimodal
idle
rl
idle
64%
平均利用率
66%
· 剩余容量充足,可即时接入新负载
实时视频监控 · 苏州机房
⤢
LIVE
CAM-01 · 主机房 A 列
--
LIVE
CAM-02 · 主机房 B 列
--
LIVE
CAM-03 · 冷通道 / 网络区
--
24 小时总功耗 · 算力负荷曲线
⤢
各基地在线率
⤢
绿电与碳足迹
⤢
0
今日绿电消纳
0
MWh
今日碳减排
0
t CO₂
等效植树
0
棵
电费 · 今日成本趋势
⤢
0
万元 · 今日累计
绿电占比 -- · 综合电价 -- 元/kWh
实时告警
⤢
GPU 集群实时监测 · DCGM 指标
节点 SZ-A-018 · 8× RTX 5090
⤢
单卡 GPU 利用率
标准算力节点 · 硬件配置
⤢
GPU 加速卡
RTX 5090 / 4090 混编
GDDR7 显存 · 8 卡集群或单卡部署
CPU 处理器
双路 EPYC 9454
96 核 · 2.75 GHz
内存
1.5TB DDR5-4800
24 根 × 64GB RDIMM
网络
400G InfiniBand
ConnectX-7 NDR 网卡
存储
约 88TB
SAS + 双 NVMe · MegaRAID
电源
3000W 冗余供电
钛金牌 PSU
预测性维护 · AI 故障预警
⤢
预测准确率
94
%
提前预警
48–72
h
本月避免故障
7
起
自愈处置率
40
%
GPU 集群利用率热力图
⤢
空闲
中载
高效
满载
过热
MTTR 3 分钟 · 利用率 +35%
节点深度监控 · GPU 遥测
DCGM / Grafana 视图
SZ-A-018 · 8× RTX 5090
SZ-B-102 · 8× RTX 4090
HZ-C-071 · 1× RTX 5090
BT-D-233 · 1× RTX 4090
整机功率
8.33 kW
含 CPU · 风扇 · PSU 损耗
DPU / 网卡最高温度
75 °C
ConnectX-7 / BlueField
GPU 总利用率
96%
全部在卡利用率均值
GPU 最高温度
62 °C
全部在卡最大值
GPU 显存拷贝均值
51.1%
显存拷贝利用率
GPU 总功率
4.02 kW
Σ 单卡实时功率
主机 CPU 利用率 (双路 EPYC · 192C)
内存利用率 (1.5TB DDR5)
62%
0.93 TB
已用 / 1.5TB
Cache 218GB · Swap 0
磁盘空间利用率 (本地 88TB)
61%
53.7 TB
已用 / 88TB
数据集 41TB · 检查点 9TB
存储 I/O (并行文件系统)
GPU 功率 (W)
GPU 温度 (°C)
GPU 显存温度 (°C)
InfiniBand 带宽 (Active, Gb/s)
节点互联 · PCIe 5.0 / RoCE (Gb/s)
PCI 纠错设备 (Errors)
AI 作业与训练监控
训练 · 推理 · 作业管理 · 资源效率
训练监控 · Loss / 模型精度
平均训练时长
36.4
h
收敛速度
+18
%
模型精度
94.2
%
推理监控 · 延迟 P50 / P99
推理吞吐
12.8
万次/s
F1 Score
0.92
AUC-ROC
0.97
作业管理 · 队列与资源效率
作业完成率
98.6
%
作业错误率
0.4
%
单次训练成本
8.6
万元/run
单任务资源利用率
78
%
扩容效率
92
%
7 天资源需求预测
+12
%
达索时代 · AI Factory 智能生产中枢 | 每 2 秒刷新 |
← 返回首页