Hopper GPU 自发布以来，经过持续的软件优化，性能得到了显著提升。H100 GPU 在 LLM 预训练性能上比首次提交时快了 1.3 倍，并且在 GPT-3（175B 训练）中实现了 70% 的性能提升。

Hopper GPU 的持续优化 Hopper GPU 自发布以来，经过持续的软件优化，性能得到了显著提升。H100 GPU 在 LLM 预训练性能上比首次提交时快了 1.3 倍 ...

【新智元导读】一文揭秘全球最大AI超算，解析液冷机架和网络系统的创新设计。这台全球最大AI超算Colossus由xAI和英伟达联手建造，耗资数十亿，10万块H100仅半个多月搭建完成，未来规模还将扩大一倍！

在人工智能的迅猛发展背景下，全球最大的AI超级计算机Colossus最近首次曝光。这台由xAI与英伟达联手构建的超级计算机，凭借着10万块H100显卡的神速组装，展现出强大的计算能力和创新设计，成为AI训练的顶尖平台。

目前，Colossus的第一阶段建设已完成，集群全面上线，但这并不是终点。它将很快迎来升级，GPU容量将翻倍，新增5万块H100 GPU和5万块下一代H200 GPU。

英伟达 (NVIDIA) 发布了其Blackwell架构AI芯片B200首个在Llama 2 70B大模型上的MLPerf Inference 4.1测试结果，显示B200的性能相较上一代的Hopper H100有4倍的提升 ...

首先，英伟达的Blackwell B200 处理器使用的是 FP4 精度，因为其第五代 Tensor Core 支持该格式，而基于 Hopper 的 H100 则仅支持和使用 FP8。MLPerf 指南允许 ...