NVIDIA英偉達(dá)A100和A800人工智能服務(wù)器 GPU 在各種規(guī)模上實(shí)現(xiàn)出色的加速
適用于各種工作負(fù)載的強(qiáng)大計(jì)算平臺(tái)
NVIDIA A100和A800 Tensor Core GPU 可在各個(gè)規(guī)模下為 AI、數(shù)據(jù)分析和高性能計(jì)算( HPC) 應(yīng)用提供出色的加速性能,為全球的 高性能彈性數(shù)據(jù)中心提供強(qiáng)勁助力。作為 NVIDIA 數(shù)據(jù)中心平臺(tái)的引擎,與前一代 NVIDIA Volta™ 相比,A100 可使性能提升高達(dá) 20 倍。A100 可**擴(kuò)展,也可借助多實(shí)例 GPU( MIG) 技術(shù)劃分 為 7 個(gè)獨(dú)立的 GPU 實(shí)例,從而提供統(tǒng)一的平臺(tái),助力彈性數(shù)據(jù)中心根據(jù)不斷變化的工作負(fù)載需求動(dòng)態(tài)進(jìn)行調(diào)整。
NVIDIA A100 Tensor Core 技術(shù)支持廣泛的數(shù)學(xué)精度,可針對(duì)每個(gè)工作負(fù)載提供單個(gè)加速器。*一代 A100 80GB 將 GPU 顯存 加倍,提供 2TB/s 的全球超快顯存帶寬,可加速處理超大型模型和海量數(shù)據(jù)集。
A100 是完整 NVIDIA 數(shù)據(jù)中心解決方案的一部分,該解決方案由硬件、網(wǎng)絡(luò)、軟件、庫以及 NGC™ 目錄中經(jīng)優(yōu)化的 AI 模型和 應(yīng)用等疊加而成。作為適用于數(shù)據(jù)中心且功能強(qiáng)大的端到端 AI 和 HPC 平臺(tái),A100 可助力研究人員獲得真實(shí)的結(jié)果,并能將解決方案大規(guī)模部署到生產(chǎn)環(huán)境中。
NVIDIA英偉達(dá)A100和A800人工智能服務(wù)器GPU算力租賃產(chǎn)品規(guī)格
項(xiàng)目 |
標(biāo)準(zhǔn)配置 |
擴(kuò)展配置 |
|
1 |
準(zhǔn)系統(tǒng) |
浪潮雙路4U機(jī)架式 |
|
2 |
處理器 |
英特爾 Xeon ® Gold 6330 處理器 |
英特爾 Xeon® Platinum 8380 處理器 |
3 |
內(nèi)存 |
DDR4/RDIMM/3200MHz/64GB,總?cè)萘?TB |
*內(nèi)存容量4TB |
4 |
芯片組 |
Intel® C621A |
|
5 |
GPU |
8張A100 80GB PCIe顯卡 |
8張雙寬或16張單寬PCIe NVIDIA GPU卡 |
6 |
網(wǎng)絡(luò)通信 |
以太網(wǎng)卡,2路10G電口 |
|
7 |
InfiniBand(IB)網(wǎng)卡,2路200G QSFP56口 |
||
8 |
硬盤 |
系統(tǒng)盤,M.2 SATA SSD,容量1TB |
前面板支持24塊2.5或12塊3.5寸 SAS/SATA硬盤 |
9 |
數(shù)據(jù)盤,4TB*4/SATA,總?cè)萘?6TB |
||
10 |
電源 |
單模組2000W,2+2冗余配置 |
單模組3KW,總計(jì)12KW |
9 |
外形尺寸 |
寬度480mm,高度180mm,深度830mm |
|
10 |
工作溫度 |
5~35℃ |
|
11 |
重量 |
80kg |
跨工作負(fù)載的**性能
針對(duì)大型模型提供高達(dá) 3 倍的 AI 訓(xùn)練速度;
相較于 CPU 提供高達(dá) 249 倍的 AI 推理性能;
相較于 A100 40GB 提供高達(dá) 1.25 倍的 AI 推理性能;
為 HPC 應(yīng)用提供高達(dá) 1.8 倍的性能;
四年來 HPC 性能提升 11 倍;
相較于 A100 40GB,在大數(shù)據(jù)分析基準(zhǔn)測(cè)試中速度提升 2 倍;
突破性的創(chuàng)新
NVIDIA AMPERE 架構(gòu)
第三代 TENSOR CORE 技術(shù)
新一代 NVlink:A100 中采用的 NVIDIA NVlink 可提供兩倍于上一代的吞吐量。與 NVIDIA NVSwitch™ 結(jié)合使用時(shí),此技術(shù)可將多達(dá) 16 個(gè) A100 GPU 互連,并將速度提升至 600GB/s,從而在單個(gè)服務(wù)器上實(shí)現(xiàn)出色的應(yīng)用性能。NVlink 技術(shù)可應(yīng)用在 A100 中:SXM GPU 通過 HGX A100 服務(wù)器主板連接,PCIe GPU 通過 NVlink 橋接器可橋接多達(dá)兩塊 GPU。
多實(shí)例 GPU( MIG) 技術(shù)
高帶寬顯存( HBM2E)