近日,從德國(guó)漢堡召開(kāi)的國(guó)際超算大會(huì)ISC2023傳來(lái)消息,華中科技大學(xué)并行數(shù)據(jù)存儲(chǔ)實(shí)驗(yàn)室(HUST-PDSL)聯(lián)合華為分布式存儲(chǔ)和濟(jì)南超級(jí)計(jì)算技術(shù)研究院研發(fā)的OceanFS2超算文件系統(tǒng),運(yùn)行在配備了華為OceaStorPacific分布式存儲(chǔ)硬件的國(guó)家超級(jí)計(jì)算濟(jì)南中心(JNIST)Ceeloo-1超級(jí)計(jì)算機(jī)上,以突破性技術(shù)取得驕人成績(jī),勇奪IO500(超算存儲(chǔ)500強(qiáng))的“Research10節(jié)點(diǎn)榜單”總分第一、帶寬性能第一和元數(shù)據(jù)性能第一,并將IO500世界記錄提高15倍以上。這是HUST-PDSL實(shí)驗(yàn)室第二次獲得該獎(jiǎng)項(xiàng)。
IO500(超算存儲(chǔ)500強(qiáng))官網(wǎng)公布了最新的排行榜,PDSL實(shí)驗(yàn)室兩次出現(xiàn)在這個(gè)榜單上。
國(guó)際超級(jí)計(jì)算大會(huì)ISC和全球超級(jí)計(jì)算機(jī)大會(huì)SC是世界公認(rèn)的頂級(jí)高性能計(jì)算大會(huì)。自2017年開(kāi)始,IO500榜單在這兩個(gè)會(huì)議上半年一次交替發(fā)布,是國(guó)際數(shù)據(jù)存儲(chǔ)界最具權(quán)威性的榜單。
IO500包括“總榜單”和“10節(jié)點(diǎn)榜單”兩類。其中,“10節(jié)點(diǎn)榜單”將基準(zhǔn)性能測(cè)試統(tǒng)一規(guī)定為10個(gè)計(jì)算節(jié)點(diǎn),可以準(zhǔn)確反映存儲(chǔ)系統(tǒng)為實(shí)際程序提供的I/O(輸入輸出)性能,便于用戶橫向?qū)Ρ?,參考價(jià)值更高。IO500涵蓋帶寬和元數(shù)據(jù)兩項(xiàng)基準(zhǔn)測(cè)試,并據(jù)此計(jì)算整個(gè)存儲(chǔ)系統(tǒng)的性能總評(píng)分。
據(jù)介紹,華中科大并行數(shù)據(jù)存儲(chǔ)實(shí)驗(yàn)室(ParallelDataStorageLab,PDSL)對(duì)超算存儲(chǔ)的文件系統(tǒng)進(jìn)行了長(zhǎng)期的創(chuàng)新研究,并在去年德國(guó)舉行的ISC2022上以FlashFS文件系統(tǒng)運(yùn)行在國(guó)家超級(jí)計(jì)算濟(jì)南中心的山河超級(jí)計(jì)算機(jī)上,獲得IO500世界10節(jié)點(diǎn)冠軍。為了使高校的創(chuàng)新技術(shù)能真正應(yīng)用到我國(guó)企業(yè)產(chǎn)品之中,而不只是停留在打榜奪冠層面,實(shí)驗(yàn)室此次在獲獎(jiǎng)的文件系統(tǒng)基礎(chǔ)上,聯(lián)合華為分布式存儲(chǔ)研發(fā)了OceanFS2新一代并行分布式超算文件系統(tǒng),在多個(gè)關(guān)鍵技術(shù)上進(jìn)行了重要的創(chuàng)新。
測(cè)試環(huán)境基于10個(gè)客戶端與OceanStorPacific分布式存儲(chǔ)硬件組合,采用了最新一代國(guó)產(chǎn)化存儲(chǔ)底座和互聯(lián)架構(gòu)構(gòu)建的OceanFS2,經(jīng)過(guò)IO500國(guó)際組織規(guī)定的12項(xiàng)苛刻的場(chǎng)景測(cè)試,取得了2439.37GiB/s的帶寬和7,705,448.04(KIOP/S)的元數(shù)據(jù)訪問(wèn)性能,結(jié)果表明OceanFS2性能十分優(yōu)異,以遙遙領(lǐng)先的優(yōu)勢(shì)奪冠。
華中科技大學(xué)并行數(shù)據(jù)存儲(chǔ)實(shí)驗(yàn)室(PDSL)主要研究方向包括分布式大數(shù)據(jù)存儲(chǔ)系統(tǒng)結(jié)構(gòu)、分布式文件系統(tǒng)、智能存儲(chǔ)系統(tǒng)研究等,其團(tuán)隊(duì)成員為來(lái)自武漢光電國(guó)家研究中心和計(jì)算機(jī)學(xué)院的教師和學(xué)生,教師有萬(wàn)繼光教授、謝長(zhǎng)生教授、譚志虎教授和李國(guó)寬副教授,參與OceanFS2研發(fā)的核心骨干包括華中科技大學(xué)武漢光電國(guó)家研究中心碩士生楊豪邁、計(jì)算機(jī)學(xué)院本科生陳奕驍(已保研到武漢光電國(guó)家研究中心)、武漢光電國(guó)家研究中心博士生魯凱。
人工智能、大數(shù)據(jù)和云計(jì)算的快速發(fā)展,對(duì)算力的需求激增,而存儲(chǔ)始終是高性能計(jì)算機(jī)系統(tǒng)的性能瓶頸所在,提升存儲(chǔ)性能(存力)是當(dāng)務(wù)之急?,F(xiàn)有的并行文件系統(tǒng)不能夠充分發(fā)揮硬件的性能。因此,發(fā)展全新的分布式超算文件系統(tǒng)意義重大。
“將論文寫在祖國(guó)大地上”是華中科技大學(xué)堅(jiān)持的一貫理念,也是華中科技大學(xué)數(shù)據(jù)存儲(chǔ)研究團(tuán)隊(duì)的特色之一。在從事科技前沿研究的同時(shí),團(tuán)隊(duì)對(duì)十分重視與我國(guó)企業(yè)的合作,其目的是促進(jìn)我國(guó)存儲(chǔ)產(chǎn)業(yè)從底層打牢基礎(chǔ),掌握核心技術(shù),從根基上提升我國(guó)數(shù)據(jù)存儲(chǔ)產(chǎn)業(yè)的技術(shù)創(chuàng)新能力。早在20多年前,謝長(zhǎng)生教授就帶領(lǐng)團(tuán)隊(duì)與華為合作,聯(lián)合開(kāi)發(fā)成功了該公司存儲(chǔ)部門起步時(shí)的第一臺(tái)存儲(chǔ)產(chǎn)品樣機(jī),萬(wàn)繼光當(dāng)時(shí)作為學(xué)生骨干參加了開(kāi)發(fā)。當(dāng)年的學(xué)生如今已成為廣受學(xué)生喜愛(ài)的教授,仍然堅(jiān)持學(xué)術(shù)研究服務(wù)產(chǎn)業(yè)的優(yōu)良傳統(tǒng),將大量學(xué)術(shù)研究成果應(yīng)用于骨干企業(yè),還培養(yǎng)出“華為天才少年”這樣的高端人才。此次國(guó)際頂級(jí)賽事以極為亮眼的成績(jī)奪冠,是華中科技大學(xué)產(chǎn)學(xué)研結(jié)合的又一成功范例。
大學(xué)院校在線查
高考熱門一鍵查
有疑問(wèn)就來(lái)發(fā)現(xiàn)