周四，Susquehanna维持对NVIDIA ...

Hopper GPU 自发布以来，经过持续的软件优化，性能得到了显著提升。H100 GPU 在 LLM 预训练性能上比首次提交时快了 1.3 倍，并且在 GPT-3（175B 训练）中实现了 70% 的性能提升。

本周二，Nvidia的股价再次超越苹果，成为全球最有价值的公司，继今年6月创下类似纪录后，再度迎来辉煌时刻。在过去两年中，凭借GPU的强大算力，Nvidia在AI时代可谓风光无限，芯片性能不断攀升，取得了巨大的市场成功。

我们可以通过多种方式来扩展计算引擎的内存容量和内存带宽，从而更好地驱动 AI 和 HPC 工作负载，而目前我们能够做到的还远远不够。但是，我们可能做的任何事情（目前有许多有趣的光学 I/O ...

目前，Colossus的第一阶段建设已完成，集群全面上线，但这并不是终点。它将很快迎来升级，GPU容量将翻倍，新增5万块H100 GPU和5万块下一代H200 GPU。

目前，Colossus的第一阶段建设已完成，集群全面上线，但这并不是终点。它将很快迎来升级，GPU容量将翻倍，新增5万块H100 GPU和5万块下一代H200 GPU。

根据ServeTheHome曝光的信息来看，庞大的Colossus AI超级计算机集群采用的是超威电脑（Supermicro）的服务器，其基于NVIDIA HGX H100方案，每个服务器中 ...

xAI位于田纳西州孟菲斯市的Colossus超级计算机集群达到了10万颗 NVIDIA? Hopper GPU的巨大规模。该集群使用了NVIDIA Spectrum-X?以太网网络平台，该平台是专 ...

2024 年 10 月 28 日—NVIDIA 宣布，xAI 位于田纳西州孟菲斯市的 Colossus 超级计算机集群达到了 10 万颗 NVIDIA® Hopper GPU 的巨大规模。该集群使用了 NVIDIA Spectrum-X™ ...

H100 GPU 的租赁价格正在经历前所未有的下降，每年降幅达到或超过 40%。这一趋势尤其明显地体现在小型集群上。NVIDIA 曾预计在 4 年内保持每 GPU 每 ...