服务电话:

400-801-5670

NVIDIA Hopper全面投产

发表时间:2022年09月22日 作者: 浏览次数:853

北京*新消息,NVIDIA宣布NVIDIA H100 Tensor Core GPU全面投产,NVIDIA全球技术合作伙伴计划于10月推出首批基于开创性NVIDIA Hopper架构的产品和服务。


戴尔科技、慧与、联想、超微以及AWS、谷歌云、Microsoft Azure、Oracle Cloud Infrastructure正在打造基于H100的产品,并将于下月开始供货

H100于2022年4月发布,由800亿个晶体管组成,并采用了众多开创性的技术,包括强大的全新Transformer 引擎和NVIDIA NVLink互连技术,以加速*大规模的AI模型,如高级推荐系统和大型语言模型,并推动对话式AI 和药物发现等领域的创新。

NVIDIA创始人兼首席执行官黄仁勋表示:“Hopper是AI工厂的全新引擎。它能够处理和挖掘海量数据,训练具有数万亿参数的模型,这些模型将推动基于语言的AI、机器人、医疗和生命科学领域的进步。Hopper的Transformer引擎将性能提升了一个数量级,使大规模AI和HPC能够为企业和研究人员所用。”

除了Hopper的架构和Transformer引擎之外,第二代多实例GPU、机密计算、第四代NVIDIA NVLink和DPX指令等若干关键性创新也让H100 GPU如虎添翼,实现了NVIDIA加速计算数据中心平台的又一次飞跃。

用于主流服务器的H100现包含为期五年的NVIDIAAI Enterprise软件套件许可。这将优化AI 工作流的开发和部署,确保用户能够获得构建AI聊天机器人、推荐引擎、视觉AI等所需的AI框架和工具。

Hopper的全球推广

H100使企业能够削减AI的部署成本,相较于上一代,在提供相同AI性能的情况下,可将能效提高3.5倍,总体拥有成本减少至1/3,所使用的服务器节点数也减少至1/5。

对于有意立即尝试这项新技术的客户,NVIDIA已宣布戴尔PowerEdge服务器上的H100现可在NVIDIA LaunchPad上使用。NVIDIALaunchPad为企业提供免费的动手实操实验室,让企业能够接触到*新的硬件和NVIDIA AI软件。

NVIDIA DGX H100系统现在也已开始接受客户预定。该系统包含8个H100 GPU,FP8精度的峰值性能达到32 PFlops。每个DGX系统都包含NVIDIA Base Command和NVIDIA AIEnterprise软件,可实现从单一节点到NVIDIA DGX SuperPOD的集群部署,为大型语言模型和其他大规模工作负载的高级AI开发工作提供支持。

全球领先的计算机制造商所提供的搭载H100的系统预计将在未来几周内发货,到今年年底将有超过50款服务器型号面市,2023年上半年还将有数十款型号面市。已在构建系统的合作伙伴包括源讯(Atos)、思科、戴尔科技、富士通、技嘉科技、慧与、联想和超微。

此外,数家全球领先的高等教育和研究机构的新一代超级计算机也将采用H100。其中包括巴塞罗那超级计算中心、洛斯阿拉莫斯国家实验室、瑞士国家超级计算中心(CSCS)、德州高级计算中心和筑波大学。

H100走向云端

AWS、谷歌云、Microsoft Azure、Oracle Cloud Infrastructure将从明年开始率先在云端部署基于H100的实例。

MicrosoftAzure AI基础设施总经理Nidhi Chappell表示: “我们期待着在Microsoft Azure的*新H100 GPU上实现下一代AI模型。借助Hopper架构的进步,加之我们在Azure AI超级计算方面的投资,我们将能够助力加速全球AI的发展。”

OracleCloud Infrastructure产品管理副总裁Karan Batta表示: “我们通过为客户提供NVIDIA*新的H100 GPU,帮助他们加速*为复杂的机器学习和HPC工作负载。另外,凭借NVIDIA的新一代H100 GPU,我们能够为内部要求严苛的工作负载提供支持,并助力我们共同的客户在医疗、自动驾驶汽车、机器人和物联网领域取得突破。”

NVIDIA的软件支持

H100的Transformer引擎技术可助力企业快速开发精度更高的大型语言模型。随着这些模型的规模不断扩大,其复杂性也在不断提升,有些模型的训练时间甚至长达数月。

为解决这一问题,一些全球领先的大型语言模型和深度学习框架正在H100上进行优化,包括NVIDIA NeMo Megatron、Microsoft DeepSpeed、Google JAX、PyTorch、TensorFlow和XLA。这些框架与Hopper架构相结合,能够显著提升AI性能,将大型语言模型的训练时间缩短到几天乃至几小时。