面向數(shù)據(jù)科學(xué)家和人工智能研究人員的Magnum IO
時(shí)間:2022-03-12 01:15:01 | 來(lái)源:行業(yè)動(dòng)態(tài)
時(shí)間:2022-03-12 01:15:01 來(lái)源:行業(yè)動(dòng)態(tài)
Magnum IO是一款軟件套件,旨在幫助數(shù)據(jù)科學(xué)家、人工智能和高性能計(jì)算研究人員能夠在數(shù)分鐘而不是數(shù)小時(shí)內(nèi)處理大量的數(shù)據(jù)。
該軟件套件和工具與傳統(tǒng)模型相比,當(dāng)處理海量數(shù)據(jù)集能夠?yàn)槎喾?wù)器、多GPU計(jì)算節(jié)點(diǎn)提供高達(dá)20倍的數(shù)據(jù)傳輸速度,因此非常適合進(jìn)行大規(guī)模的復(fù)雜財(cái)務(wù)分析、氣候建模和其他高性能計(jì)算工作負(fù)載。
黃仁勛表示:處理大量收集來(lái)的數(shù)據(jù)或者模擬數(shù)據(jù)是像人工智能這樣的數(shù)據(jù)科學(xué)的核心。
Nvidia通過(guò)與計(jì)算、網(wǎng)絡(luò)和存儲(chǔ)領(lǐng)域的眾多行業(yè)領(lǐng)導(dǎo)者緊密合作開(kāi)發(fā)了Magnum IO,包括DataDirect Networks、Excelero、IBM、Mellanox和WekaIOLtd。
Magnum IO的核心是GPUDirect,該架構(gòu)允許數(shù)據(jù)繞過(guò)CPU并使用GPU、存儲(chǔ)和網(wǎng)絡(luò)設(shè)備提供的開(kāi)放高速公路來(lái)處理數(shù)據(jù),發(fā)布之初該架構(gòu)兼容眾多采用點(diǎn)對(duì)點(diǎn)和遠(yuǎn)程訪問(wèn)直接內(nèi)存的通信互連。
黃仁勛表示:極端計(jì)算需要極端的I/O。Magnum IO通過(guò)將Nvidia GPU加速具有革命性的計(jì)算基數(shù)引入I/O和存儲(chǔ)來(lái)實(shí)現(xiàn)這一點(diǎn)?,F(xiàn)在,人工智能研究人員和數(shù)據(jù)科學(xué)家不用等待漫長(zhǎng)的數(shù)據(jù)處理,可以把精力放在完成自己的工作上。
最新推出的元素是GPUDirect Storage,它讓研究人員可以在訪問(wèn)存儲(chǔ)時(shí)繞過(guò)CPU,快速處理數(shù)據(jù)文件以進(jìn)行仿真、分析或可視化。
Nvidia Magnum IO現(xiàn)已上市,但不包含GPUDirect Storage,GPUDirect Storage僅面向某些選定的早期客戶,計(jì)劃于2020年上半年全面上市。
關(guān)鍵詞:研究,數(shù)據(jù),科學(xué)家