近年來，以深度學(xué)習(xí)為代表的人工智能產(chǎn)業(yè)熱潮開始席卷全球。為了緊跟行業(yè)發(fā)展趨勢(shì)、推動(dòng)人工智能科研與技術(shù)創(chuàng)新，中國(guó)石油大學(xué)(華東)啟動(dòng)了深度學(xué)習(xí)平臺(tái)的建設(shè)，并使用浪潮深度學(xué)習(xí)管理平臺(tái)AIStation來搭建管理系統(tǒng)，在實(shí)現(xiàn)深度學(xué)習(xí)環(huán)境快速部署的同時(shí)，提高了對(duì)深度學(xué)習(xí)訓(xùn)練任務(wù)的管理能力，從而為深度學(xué)習(xí)技術(shù)創(chuàng)新搭建了一個(gè)優(yōu)秀的平臺(tái)。
拓展深度學(xué)習(xí)，滿足計(jì)算力需求是燃眉之急
中國(guó)石油大學(xué)(華東)直屬教育部，是國(guó)家“211工程”和“985工程優(yōu)勢(shì)學(xué)科創(chuàng)新平臺(tái)”高校，2017年被確定為國(guó)家“雙一流”建設(shè)高校。其中，計(jì)算機(jī)與通信學(xué)院(簡(jiǎn)稱：計(jì)通學(xué)院)依托于學(xué)校雄厚的資源和實(shí)力，在計(jì)算機(jī)領(lǐng)域擁有不俗實(shí)力，學(xué)院也一直在進(jìn)行深度學(xué)習(xí)的相關(guān)研究和人才培養(yǎng)。在人工智能產(chǎn)業(yè)爆發(fā)的背景下，學(xué)院緊跟行業(yè)發(fā)展方向，決定建設(shè)深度學(xué)習(xí)平臺(tái)，方便學(xué)院研究人員和學(xué)生使用，加速學(xué)院在深度學(xué)習(xí)領(lǐng)域的研究。
業(yè)界普遍認(rèn)為，深度學(xué)習(xí)能夠發(fā)展迅速的三個(gè)要素包括強(qiáng)大的計(jì)算力、高效的算法以及足夠大量的訓(xùn)練數(shù)據(jù)，其中，計(jì)算力的局限在深度學(xué)習(xí)的發(fā)展過程中體現(xiàn)得尤為明顯：深度學(xué)習(xí)的核心是矩陣預(yù)算，也就是浮點(diǎn)運(yùn)算。深度神經(jīng)網(wǎng)絡(luò)由于層數(shù)多、結(jié)構(gòu)復(fù)雜、節(jié)點(diǎn)數(shù)多、訓(xùn)練數(shù)據(jù)集大等特點(diǎn)，訓(xùn)練過程所需的時(shí)間特別長(zhǎng)，通常以數(shù)日、數(shù)周、甚至數(shù)月來計(jì)算，這對(duì)計(jì)算能力提出了極為苛刻的要求。
對(duì)于中國(guó)石油大學(xué)(華東)計(jì)通學(xué)院來說，其擁有雄厚的人才儲(chǔ)備和技術(shù)研發(fā)能力，在深度學(xué)習(xí)相關(guān)算法及模型以及訓(xùn)練數(shù)據(jù)方面擁有巨大的優(yōu)勢(shì)，因此滿足計(jì)算力的需求就成了學(xué)院在搭建深度學(xué)習(xí)平臺(tái)過程中首要解決的問題。另一方面，學(xué)院作為研究與教學(xué)機(jī)構(gòu)，并不希望投入過多的人力物力在深度學(xué)習(xí)環(huán)境的搭建上，而是更希望將精力用于深度學(xué)習(xí)算法和模型的研究與構(gòu)建上，因此學(xué)院希望部署一套功能強(qiáng)大、方便易用的深度學(xué)習(xí)管理系統(tǒng)，來管理深度學(xué)習(xí)平臺(tái)的資源以及訓(xùn)練任務(wù)。
開啟智慧教育新模式，浪潮提供AI端到端解決方案
針對(duì)中國(guó)石油大學(xué)(華東)的需求，浪潮提供了面向人工智能的端到端解決方案。為提升平臺(tái)的計(jì)算能力，浪潮在硬件選擇上為學(xué)校推薦了全新應(yīng)用優(yōu)化的旗艦2U雙路機(jī)架產(chǎn)品NF5280M4，搭配2塊當(dāng)時(shí)最新架構(gòu)的GPU卡NVIDIATeslaP100，每塊卡能夠提供高達(dá)9.3萬億次的單精度計(jì)算能力。同時(shí)配置256G超大內(nèi)存和高速SAS硬盤，用戶做深度學(xué)習(xí)訓(xùn)練的GB級(jí)超大數(shù)據(jù)集可以全部直接加載到內(nèi)存中，避免了數(shù)據(jù)集IO瓶頸，為用戶帶來極致性能。
在至關(guān)重要的深度學(xué)習(xí)管理系統(tǒng)部署方面，浪潮采用了最新的深度學(xué)習(xí)管理平臺(tái)AIStation來構(gòu)建整個(gè)深度學(xué)習(xí)平臺(tái)。AIStation是一個(gè)深度學(xué)習(xí)集群和訓(xùn)練任務(wù)管理軟件，可以快速部署深度學(xué)習(xí)環(huán)境，管理深度學(xué)習(xí)訓(xùn)練任務(wù)，為深度學(xué)習(xí)提供高效便利的運(yùn)行環(huán)境。
軟件采用全容器化運(yùn)行，應(yīng)用與用戶之間相互隔離;通過AIStation的模板創(chuàng)建容器，可以一鍵生成包含運(yùn)行環(huán)境的容器，省去了用戶自行部署深度學(xué)習(xí)環(huán)境的繁瑣。AIStation還支持GPU動(dòng)態(tài)調(diào)度、按需分配，最大化GPU的利用率，讓用戶完成更多的計(jì)算任務(wù)。中國(guó)石油大學(xué)(華東)通過AIStation可以管理可視化的訓(xùn)練任務(wù)、管理訓(xùn)練進(jìn)程，及時(shí)偵測(cè)到模型訓(xùn)練問題，加速訓(xùn)練過程。
在浪潮AIStation的幫助下，中國(guó)石油大學(xué)(華東)極大地降低了深度學(xué)習(xí)平臺(tái)的搭建時(shí)間，使得學(xué)校的師生能夠在深度學(xué)習(xí)技術(shù)日新月異的背景下，快速追趕并引領(lǐng)深度學(xué)習(xí)的技術(shù)創(chuàng)新浪潮。AIStation還有效地提升了中國(guó)石油大學(xué)(華東)深度學(xué)習(xí)平臺(tái)的運(yùn)行效率，以最低的建設(shè)成本實(shí)現(xiàn)了最高的運(yùn)行效率，讓資源得到了充分利用。自深度學(xué)習(xí)平臺(tái)搭建以來，中國(guó)石油大學(xué)(華東)在深度學(xué)習(xí)領(lǐng)域取得了多項(xiàng)重要的科研成果，夯實(shí)了在人工智能教育與科研領(lǐng)域的優(yōu)勢(shì)。
中國(guó)石油大學(xué)(華東)計(jì)通學(xué)院負(fù)責(zé)人表示：“浪潮AIStation表現(xiàn)讓我們印象深刻，幫助我們快速搭建了高性能、使用運(yùn)維簡(jiǎn)捷的深度學(xué)習(xí)平臺(tái)。此外，浪潮的應(yīng)用研發(fā)和調(diào)優(yōu)專家多次親自上門為我院調(diào)試AIStation及集群，實(shí)現(xiàn)了對(duì)我院原有設(shè)備的整合，其專業(yè)的服務(wù)和高超的專業(yè)技能讓我們非常滿意。希望此次雙方的合作不僅能夠?yàn)槲以荷疃葘W(xué)習(xí)的科研提供強(qiáng)大助力，也對(duì)國(guó)內(nèi)其他高校和科研機(jī)構(gòu)深度學(xué)習(xí)平臺(tái)的建立提供借鑒。”
