訂閱
糾錯
加入自媒體

超算“猛將”英偉達(dá):AI超算的未來已來?

在談英偉達(dá)的大戰(zhàn)略之前,明確兩個重要事件:

英偉達(dá)NVIDIA在2019年3月公開以69億美元現(xiàn)金收購Mellanox,該項交易最終在2020年4月塵埃落定。

英偉達(dá)NVIDIA在2020年9月宣布以400億美元現(xiàn)金加股票的方式,對軟銀旗下芯片設(shè)計公司、全球重要芯片架構(gòu)提供商Arm進(jìn)行收購。

這兩件事情的成功,為英偉達(dá)在芯片領(lǐng)域的發(fā)展帶來了更深入、更廣泛的發(fā)展前景,以及更為利好的影響。從資本市場的表現(xiàn)就可見一斑,按周一美東時間11月16日16:00收盤時的價格計算,英偉達(dá)的總市值為3335.56億美元,幾乎快超過某友商市值的兩倍。友商名字不方便公布,大家可以猜猜看。

前些天業(yè)內(nèi)朋友感嘆,這一年,過得太快了。其實(shí),我更想感嘆,英偉達(dá)的市值飆升得太快了。

但這市值增長的背后,卻暗藏著英偉達(dá)的更大圖謀:超算大戰(zhàn)略。

根據(jù)最新的TOP500榜單排名顯示,英偉達(dá)全面領(lǐng)先,無論是針對超算領(lǐng)域的計算、網(wǎng)絡(luò)還是HPC。

事實(shí)上,NVIDIA GPU和網(wǎng)絡(luò)正在越來越多地用于加速世界上最快的超級計算機(jī)。

一是,基于NVIDIA技術(shù)構(gòu)建的超算系統(tǒng)占比絕對領(lǐng)先,包括8個TOP10超算系統(tǒng)在內(nèi),近70%進(jìn)入TOP500榜單的超算系統(tǒng)都基于NVIDIA技術(shù)構(gòu)建。

二是,NVIDIA Selene超級計算機(jī)(HPC)在全球超級計算機(jī)速度排行中位列第五。該超級計算機(jī)基于NVIDIA DGX A100 640GB系統(tǒng)和NVIDIA Mellanox InfiniBand網(wǎng)絡(luò)構(gòu)建。

三是,在衡量系統(tǒng)能源效率的Green500榜單中,NVIDIA DGX SuperPOD系統(tǒng)位居榜首,得到業(yè)界一致肯定。

從SC20(Supercomputing Conference)超算大會公布的最新TOP500榜單可以看出,英偉達(dá)的超算大戰(zhàn)略勢在必得,將在強(qiáng)化現(xiàn)有技術(shù)能力部署的前提下,明確了下一步戰(zhàn)略的“三駕馬車”:GPU更強(qiáng)、HPC更快、網(wǎng)絡(luò)更優(yōu)。面向超算領(lǐng)域,英偉達(dá)的戰(zhàn)略很明確,一點(diǎn)兒都不用含糊,更強(qiáng)更快更優(yōu),也將會是其長期屹立超算領(lǐng)域的制勝法寶。

更強(qiáng):GPU一路高歌猛進(jìn)

在超算行業(yè),強(qiáng)中自有強(qiáng)中手。作為超算領(lǐng)域最佳加持者,英偉達(dá)在GPU這條發(fā)展路上,可謂一路高歌猛進(jìn)。

AI算力的強(qiáng)大,再一次彰顯了英偉達(dá)整體超算戰(zhàn)略的英明。似乎,這也是英偉達(dá)命中注定的好趨勢,誰叫AI行業(yè)化,行業(yè)AI化的智能化時代來得如此之快呢。

針對數(shù)據(jù)中心GPU需求來看,英偉達(dá)以A100、A40、V100、T4、RTX 6000、RTX 8000多款業(yè)界知名的產(chǎn)品系列既已覆蓋。

然而術(shù)業(yè)有專攻。針對大流量數(shù)據(jù)工作負(fù)載方面,AI算力的需求特別突出,但是隨著NVIDIA A100 80GB GPU的出現(xiàn),非常有助于各種訓(xùn)練、推理和超級計算應(yīng)用等方面的發(fā)展,在速度和性能上得以前所未有的滿足。

作為英偉達(dá)創(chuàng)始人、現(xiàn)任CEO黃仁勛親手推出的GPU力作,A100第一代產(chǎn)品是在幾個月前的英偉達(dá)GTC 2020大會上首次亮相的。

因?yàn)槭腔谟ミ_(dá)安培(Ampere)架構(gòu)的首款圖形處理器,所以備受業(yè)界關(guān)注。當(dāng)時A100引入了有著里程碑式意義的Tensor Cores雙精度計算技術(shù)。要知道以前在NVIDIA V100 Tensor Core GPU上需要10個小時的雙精度模擬作業(yè),在A100上4小時即可完成。

NVIDIA A100 Tensor Core GPU針對AI、數(shù)據(jù)分析和高性能計算 (HPC)等應(yīng)用上,實(shí)現(xiàn)了更強(qiáng)的加速,針對極其嚴(yán)峻的計算挑戰(zhàn)上有了更大作為。A100高效擴(kuò)展性也很突出,數(shù)千個A100 GPU在同一個系統(tǒng)中成功實(shí)現(xiàn)集成,也可以利用NVIDIA多實(shí)例 GPU (MIG) 技術(shù)將每個A100 劃分割為七個獨(dú)立的GPU實(shí)例,獲得對各種規(guī)模工作負(fù)載的加速。

需要注意的是,這里針對HPC性能的對比中,僅限于NVIDIA V100 GPU第一代產(chǎn)品。

A100的出現(xiàn),對數(shù)據(jù)中心大規(guī)模的計算帶來了更強(qiáng)的優(yōu)化效果,不僅統(tǒng)一了人工智能訓(xùn)練和推理,同時將靈活、彈性加速的實(shí)現(xiàn)可能性向前又推進(jìn)一步。

作為A100 GPU系列中的最新力作,A100 80GB GPU在繼承了第一代A100 GPU的優(yōu)勢基礎(chǔ)上,內(nèi)存比第一代A100 GPU提升一倍,也支持NVIDIA HGX AI超級計算平臺。

大內(nèi)存容量和高帶寬,對于AI與HPC實(shí)際應(yīng)用的好處有目共睹,畢竟在這個領(lǐng)域中一切都要以速度決勝負(fù)。全新A100采用HBM2e技術(shù),可將A100 40GB GPU的高帶寬內(nèi)存增加一倍至80GB,提供每秒超過2TB的內(nèi)存帶寬。這使得數(shù)據(jù)可以快速傳輸?shù)饺蜃羁斓臄?shù)據(jù)中心GPU A100上,使研究人員能夠更快地加速其應(yīng)用,處理最大規(guī)模的模型和數(shù)據(jù)集。

由此,我們可以很容易看到全新一代的增強(qiáng)A100 80GB GPU在HPC領(lǐng)域的表現(xiàn)更為突出,相比最早一代2016年代表之作P100 GPU,A100 80GB GPU實(shí)現(xiàn)了HPC應(yīng)用性能的11倍提升。

不僅如此,在深度學(xué)習(xí)、數(shù)據(jù)分析、能效方面都獲得了前所未有的優(yōu)化。

對于如RNN-T等自動語言識別模型的AI推理,單個A100 80GB MIG實(shí)例可處理更大規(guī)模的批量數(shù)據(jù),將生產(chǎn)中的推理吞吐量提高1.25倍。

在TB級零售大數(shù)據(jù)分析基準(zhǔn)上,A100 80GB將其性能提高了2倍,使其成為可對最大規(guī)模數(shù)據(jù)集進(jìn)行快速分析的理想平臺。隨著數(shù)據(jù)的動態(tài)更新,企業(yè)可以實(shí)時做出關(guān)鍵決策。

對于科學(xué)應(yīng)用,A100 80GB可為天氣預(yù)報和量子化學(xué)等領(lǐng)域提供巨大的加速。材料模擬軟件Quantum Espresso采用單節(jié)點(diǎn)A100 80GB實(shí)現(xiàn)了近2倍的吞吐量提升。

從這幾個比較典型的需要大量數(shù)據(jù)存儲空間的應(yīng)用來看,A100 80GB GPU在應(yīng)用性能上確實(shí)成為新一代GPU的亮點(diǎn)。由此在架構(gòu)特性上可以總結(jié)為幾點(diǎn):

一是,采用第三代Tensor Core核心。通過全新TF32,將上一代Volta架構(gòu)的AI吞吐量提高多達(dá)20倍。通過FP64,將HPC性能提高多達(dá)2.5倍。通過 INT8,將AI推理性能提高多達(dá)20倍,并且支持BF16數(shù)據(jù)格式。

二是,采用更大、更快的HBM2e GPU內(nèi)存。從而使內(nèi)存容量增加一倍,在業(yè)內(nèi)率先實(shí)現(xiàn)2TB/s以上的內(nèi)存帶寬。

三是,采用MIG技術(shù),將單個獨(dú)立實(shí)例的內(nèi)存增加一倍,可最多提供七個MIG,每個實(shí)例具備10GB內(nèi)存。

四是,采用結(jié)構(gòu)化稀疏技術(shù),將推理稀疏模型的速度提高兩倍。

五是,第三代NVLink和NVSwitch,相較于上一代互連技術(shù),可使GPU之間的帶寬增加至原來的兩倍,將數(shù)據(jù)密集型工作負(fù)載的GPU數(shù)據(jù)傳輸速度提高至每秒600 gigabytes。

AI能力的強(qiáng)大,表現(xiàn)在GPU產(chǎn)品的推陳出新,以及GPU為行業(yè)應(yīng)用帶來革命性的改變。這就是英偉達(dá)的過人之處,好技術(shù)帶來行業(yè)改變和產(chǎn)業(yè)格局變化。

更智即更強(qiáng)。由此而言,對于超算行業(yè)的發(fā)展來說,更智能也就自然表現(xiàn)得更為強(qiáng)大了。

更快:HPC沒有最快只有更快

超算的核心在于快,競爭的價值在于更快。在超算領(lǐng)域只有在超算系統(tǒng)上實(shí)現(xiàn)更快的速度,才能實(shí)現(xiàn)超算系統(tǒng)整體能力的更強(qiáng)。

作為強(qiáng)化AI算力的全球領(lǐng)先廠商,英偉達(dá)新一代DGX Station A100和DGX A100 640GB移動數(shù)據(jù)中心引起了我特別的注意,這也是在 SC20超級計算大會上與A100 80GB GPU同期發(fā)布的重量級產(chǎn)品。

DGX Station A100的AI性能可以達(dá)到2.5 petaflops,通過NVIDIA NVLink完全互連,實(shí)現(xiàn)四個全新NVIDIA A100 80GB GPU融合在一起的工作組服務(wù)器,同時GPU內(nèi)存高達(dá)320GB。更為特別是DGX Station A100也是唯一支持NVIDIA多實(shí)例GPU技術(shù)(MIG)的工作組服務(wù)器。借助MIG,單一DGX Station A100最多可提供28個獨(dú)立GPU實(shí)例以運(yùn)行并行任務(wù),并可在不影響系統(tǒng)性能的前提下支持多用戶應(yīng)用。

這也是全球唯一的千萬億級工作組服務(wù)器,如此性能超快的DGX Station A100,被業(yè)內(nèi)稱之為一體式AI數(shù)據(jù)中心,也就是說,用戶借助一臺DGX Station A100,就可以在任何地方部署AI超算中心了。

如此說來,作為服務(wù)器級的系統(tǒng),DGX Station A100無需配備數(shù)據(jù)中心級電源或散熱系統(tǒng),卻具有與NVIDIA DGX A100數(shù)據(jù)中心系統(tǒng)相同的遠(yuǎn)程管理功能。當(dāng)數(shù)據(jù)科學(xué)家和研究人員在家中或?qū)嶒?yàn)室辦公時,系統(tǒng)管理員可輕松地通過遠(yuǎn)程連接,執(zhí)行任何管理任務(wù)。

作為一臺隨處可得的AI超級計算機(jī),性能上的突出表現(xiàn)尤為吸引人。為支持諸如BERT Large推理等復(fù)雜的對話式AI模型,DGX Station A100比上一代DGX Station提速4倍以上。對于BERT Large AI訓(xùn)練,其性能提高近3倍。

此外,全新DGX A100 640GB系統(tǒng)也將集成到企業(yè)版NVIDIA DGX SuperPOD解決方案,使機(jī)構(gòu)能基于以20 個DGX A100系統(tǒng)為單位的一站式AI超級計算機(jī),實(shí)現(xiàn)大規(guī)模AI模型的構(gòu)建、訓(xùn)練和部署。

配備A100 80GB GPU的NVIDIA DGX SuperPOD系統(tǒng)將率先安裝于英國的Cambridge-1超級計算機(jī),以加速推進(jìn)醫(yī)療健康領(lǐng)域研究,以及佛羅里達(dá)大學(xué)的全新HiPerGator AI超級計算機(jī),該超級計算機(jī)將賦力這一“陽光之州”開展AI賦能的科學(xué)發(fā)現(xiàn)。

由此可見,新一代DGX Station A100和DGX A100 640GB移動數(shù)據(jù)中心的出現(xiàn),將給AI超級計算機(jī)的行業(yè)格局帶來一次新的震動。全球云觀察分析,這有望將超算從傳統(tǒng)超算時代推向真正的智能超算時代,那么英偉達(dá)必定就是其中舉足輕重的使能者之一。同時AI超算上的創(chuàng)新也將因?yàn)镹VIDIA A100 80GB GPU而再次迎來新的發(fā)展,對AI超算的行業(yè)應(yīng)用普及帶來了更大的發(fā)展?jié)摿εc空間。

更優(yōu):高效網(wǎng)絡(luò)性能空前

任何超算系統(tǒng),離開了高效的網(wǎng)絡(luò),基本上談不上超算?梢娋W(wǎng)絡(luò)對于超算系統(tǒng)整體價值的貢獻(xiàn)缺一不可。

為此,英偉達(dá)并購Mellanox后,對于InfiniBand高效網(wǎng)絡(luò)的性能發(fā)揮得到了空前的提升。

400G InfiniBand系統(tǒng)在之前聽說過業(yè)內(nèi)傳聞,沒有想到英偉達(dá)如今很快變成了現(xiàn)實(shí)!癗VIDIA Mellanox 400G InfiniBand的海量吞吐量和智能加速引擎使HPC、AI和超大規(guī)模云基礎(chǔ)設(shè)施能夠以更低的成本和復(fù)雜性,實(shí)現(xiàn)了全球最具挑戰(zhàn)性的網(wǎng)絡(luò)互連性能。”

為了支撐更強(qiáng)更快的AI超算的需要,Mellanox 400G InfiniBand帶來的加速能力也是值得一看。Mellanox NDR 400G InfiniBand交換機(jī),可提供3倍的端口密度和32倍的AI加速能力。并且將框式交換機(jī)系統(tǒng)的聚合雙向吞吐量提高了5倍,達(dá)到1.64 petabits/s,減少交換機(jī)使用量獲得更大工作負(fù)載的支撐,必然對用戶整體應(yīng)用成本帶來更良好的回報。

當(dāng)然,好的產(chǎn)品,特別是在行業(yè)領(lǐng)域有著技術(shù)創(chuàng)新領(lǐng)先性的產(chǎn)品,往往贏得市場的認(rèn)同更為廣泛。

從一組財報數(shù)據(jù)來看,英偉達(dá)截至2020年7月26日的第二季度財報,營收為38.7億美元,創(chuàng)歷史新高,較去年同期的25.8億美元增長50%,較上一季度的30.8億美元增長26%。

其中有一個關(guān)鍵信息就是該季度數(shù)據(jù)中心方面業(yè)務(wù)收入出奇高增長,財報期內(nèi)為17.5億美元,為2019年同期收入6.55億美元的兩倍多。這也是數(shù)據(jù)中心領(lǐng)域帶來的收入首次出現(xiàn)超越英偉達(dá)成立以來的主營視頻游戲領(lǐng)域業(yè)務(wù),財報期內(nèi)視頻游戲業(yè)務(wù)為16.5億美元。

就此來說,英偉達(dá)在數(shù)據(jù)中心取得高速增長成績,與收購Mellanox有著密切相關(guān)。

可見,英偉達(dá)Mellanox在高效網(wǎng)絡(luò)方面的性能表現(xiàn),已經(jīng)贏得了用戶的心聲,特別是在超算領(lǐng)域,英偉達(dá)Mellanox的InfiniBand技術(shù)一直備受矚目。

小結(jié):AI超算的未來已來

英偉達(dá)的超算大戰(zhàn)略,必然就是將AI加入到HPC中,并擴(kuò)展至傳統(tǒng)超級計算中心之外的平臺,從而引發(fā)了全球AI超算大趨勢。

與此同時,創(chuàng)新效率超高的英偉達(dá),在加速計算領(lǐng)域、HPC、網(wǎng)絡(luò)三大領(lǐng)域分別發(fā)布了新一代A100 80GB GPU處理器、新一代DGX StationA100和DGX A100 640GB移動數(shù)據(jù)中心、Mellanox 400G InfiniBand系統(tǒng)多款重磅新品,可謂三駕馬車并駕齊驅(qū),以應(yīng)對全球爆發(fā)式增長的數(shù)據(jù)處理需求和日益凸顯的機(jī)器學(xué)習(xí)需要。這對全球超算整體格局的變化,帶來非常積極的推動作用。

更強(qiáng)的GPU,更快的AI超算,更優(yōu)的高效網(wǎng)絡(luò),也將成為英偉達(dá)持續(xù)向前發(fā)展的重要三部曲。

【阿明】:科技評論專欄作者、科技媒體從業(yè)22年、新聞評論年產(chǎn)出上百萬字,用數(shù)據(jù)說話,帶你看懂科技上市公司

聲明: 本文由入駐維科號的作者撰寫,觀點(diǎn)僅代表作者本人,不代表OFweek立場。如有侵權(quán)或其他問題,請聯(lián)系舉報。

發(fā)表評論

0條評論,0人參與

請輸入評論內(nèi)容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁,請輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無評論

暫無評論

人工智能 獵頭職位 更多
掃碼關(guān)注公眾號
OFweek人工智能網(wǎng)
獲取更多精彩內(nèi)容
文章糾錯
x
*文字標(biāo)題:
*糾錯內(nèi)容:
聯(lián)系郵箱:
*驗(yàn) 證 碼:

粵公網(wǎng)安備 44030502002758號