News center新聞中心
【專訪】國家超級計算無錫中心主任楊廣文:神威·太湖之光將加大對深度學(xué)習(xí)的支持
來源自:捷世智通 點擊數(shù):36454 發(fā)布時間:2017-09-11
轉(zhuǎn)自新智元 ( 微信號 : AI_era ) 作者 : 胡祥杰
2017年9月7日,由中國工程院信息與電子工程學(xué)部主辦、浪潮集團(tuán)承辦的首屆人工智能計算大會(AI Computing Conference,簡稱AICC)在北京舉行。清華大學(xué)教授、國家超級計算無錫中心主任楊廣文在會上作了《神威·太湖之光的深度學(xué)習(xí)應(yīng)用》的主題演講。介紹了此前登頂全球超級計算機(jī)500強榜單榜首的神威·太湖之光在深度學(xué)習(xí)上的應(yīng)用。
“神威·太湖之光”是世界上首臺峰值浮點運算性能超過每秒十億億次的超級計算機(jī)。該系統(tǒng)是我國“十二五”期間“863計劃”的重大科研成果,由國家并行計算機(jī)工程技術(shù)研究中心研制,運算系統(tǒng)全面采用了由國家高性能集成電路設(shè)計中心通過自主核心技術(shù)研制的國產(chǎn)“申威26010”眾核處理器。
“神威·太湖之光”也是我國第一臺全部采用國產(chǎn)處理器構(gòu)建的世界排名第一的超級計算機(jī)。
此外,2016年年底,國際高性能計算應(yīng)用最高獎戈登·貝爾獎公布獲獎入選名單中,依托于“神威·太湖之光”的強大計算能力,中國有3項應(yīng)用入圍最終提名,占了總?cè)雵椖康囊话耄?017年三項入圍應(yīng)用中,基于“神威·太湖之光”的應(yīng)用占據(jù)2/3。
在會場對楊廣文教授進(jìn)行了專訪。
楊廣文教授和團(tuán)隊在無錫超級計算中心的主要工作是負(fù)責(zé)“神威·太湖之光”機(jī)器的運維。他介紹,運維的目的就是把超級計算機(jī)用好。首先得好用,然后還要用好,好用不是簡單的管理與調(diào)整機(jī)器,還要做很多國產(chǎn)處理器生態(tài)建設(shè)方面的工作。把程序庫建好、應(yīng)用支撐做好、調(diào)度方法做好,用戶的支持也就做好了,這是最基本的工作。
“當(dāng)然我們不但要讓機(jī)器好用、用好,也要考慮將來超算中心的可持續(xù)發(fā)展,所以除此之外我們還吸引國內(nèi)外的優(yōu)秀科研人員開展大量的研發(fā)工作,支持解決重要科學(xué)問題、重大裝備研發(fā),另外還進(jìn)一步支持產(chǎn)業(yè)升級等,加強研發(fā)是我們的一項重要工作。 ”楊廣文教授說。
他還與我們分享了為什么國家超級計算無錫中心選擇清華大學(xué)的團(tuán)隊去進(jìn)行維護(hù)。他說,超算是一個交叉學(xué)科研究,希望有強的學(xué)科背景,又有超算運維經(jīng)驗的單位來做這個事,這樣就選了清華大學(xué)。因為清華大學(xué)超算級計算及應(yīng)用基礎(chǔ)很好,學(xué)校也希望借助神威·太湖之光的超強計算能力來支持國家的重大需求,因此通過協(xié)商,最終決定由無錫市、清華大學(xué)、江蘇省產(chǎn)業(yè)研究院共同運維這臺世界最大的計算機(jī)。
到目前基于“神威·太湖之光”已完成了20多個應(yīng)用領(lǐng)域上百項應(yīng)用的計算任務(wù),目前完成的整機(jī)應(yīng)用已達(dá)15個,取得一些重要的應(yīng)用成果。
在采訪中了解到,無錫超算中心也就是“神威·太湖之光”接下來會與國家并行計算機(jī)工程技術(shù)中心合作推出小型化機(jī)器,并針對具體應(yīng)用進(jìn)行定制,如支持深度學(xué)習(xí)的專用機(jī)。
關(guān)于無錫超算對深度學(xué)習(xí)的支持,楊廣文教授說:“第一個開發(fā)了大量深度學(xué)習(xí)算法 并行軟件;第二,研發(fā)了一個深度學(xué)習(xí)平臺swCaffe,來支持用戶基于這個進(jìn)行深度學(xué)習(xí)應(yīng)用,目前已開展的應(yīng)用包括圍棋、語音識別、醫(yī)學(xué)圖像識別、遙感圖像分類、地震波余震特征識別、大規(guī)模冷凍電鏡生物大分子模型高精度重構(gòu)等;第三,我們也在布局,與國家并行計算機(jī)工程技術(shù)中心基于申威26010芯片開展小型化機(jī)器研發(fā),特備針對特殊應(yīng)用開展專用機(jī)的研制。進(jìn)一步,可根據(jù)重大應(yīng)用需求,提出一些申威自主芯片的一些改進(jìn)方案,如針對人工智能、深度學(xué)習(xí)做一些定制的芯片,這是一個長期的研究工作?!?/span>
此前曾經(jīng)報道,中美兩國都在開展百億億級的超級計算機(jī),這是超級計算機(jī)發(fā)展的一個目標(biāo),如果實現(xiàn)了百億億級的超級計算,它對人工智能會帶來什么樣的影響?
楊廣文教授說,百億億級的超級計算機(jī)的研制目前是一個國際競爭熱點,我國在十三五期間已進(jìn)行了規(guī)劃。百億億級超級計算機(jī)的研制成功,但對人工智能具有重要的作用,可滿足人工智能對大模型、大數(shù)據(jù)、大計算的需求。但是百億億級的超級計算機(jī)研制成功后,如何更好地支持人工智能技術(shù)的發(fā)展,需要多領(lǐng)域的專家共同努力,研發(fā)大型并行應(yīng)用軟件,共同解決核心問題。
談到AI時代對計算能力的要求,楊廣文教授認(rèn)為以后還是會朝著定制化的方向的發(fā)展。
他認(rèn)為,AI并不見得就是一定要有超算那么大一個機(jī)器來做,現(xiàn)在有很多情況下在數(shù)據(jù)采集的時候就可以進(jìn)行一些處理,所以終端就可能用到高性能計算。終端處理完以后再進(jìn)行數(shù)據(jù)收集、傳輸、存儲,后面再用到超算。
將來針對特殊應(yīng)用做一個定制的系統(tǒng)。芯片可以定制,系統(tǒng)也可以定制,應(yīng)用也可以定制,多個層次的定制,這才是一個比較滿意的系統(tǒng)。
人工智能計算大會由中國工程院信息與電子工程學(xué)部主辦、浪潮集團(tuán)承辦,共邀請了海內(nèi)外數(shù)十位知名專家圍繞AI計算創(chuàng)新主題進(jìn)行研討報告,分享了AI在互聯(lián)網(wǎng)、云計算、超算、安防、醫(yī)療、能源、電商、智慧城市等眾多行業(yè)的創(chuàng)新實例,吸引了來自各行業(yè)的數(shù)千名專業(yè)人士參與。主旨是圍繞AI當(dāng)下需求及未來發(fā)展,從計算創(chuàng)新著眼,聯(lián)合從事AI計算及應(yīng)用的公司、用戶、專家、開發(fā)者共同打造探討促進(jìn)AI計算的交流合作平臺,推動AI產(chǎn)業(yè)的可持續(xù)發(fā)展。
2017年9月7日,由中國工程院信息與電子工程學(xué)部主辦、浪潮集團(tuán)承辦的首屆人工智能計算大會(AI Computing Conference,簡稱AICC)在北京舉行。清華大學(xué)教授、國家超級計算無錫中心主任楊廣文在會上作了《神威·太湖之光的深度學(xué)習(xí)應(yīng)用》的主題演講。介紹了此前登頂全球超級計算機(jī)500強榜單榜首的神威·太湖之光在深度學(xué)習(xí)上的應(yīng)用。
“神威·太湖之光”是世界上首臺峰值浮點運算性能超過每秒十億億次的超級計算機(jī)。該系統(tǒng)是我國“十二五”期間“863計劃”的重大科研成果,由國家并行計算機(jī)工程技術(shù)研究中心研制,運算系統(tǒng)全面采用了由國家高性能集成電路設(shè)計中心通過自主核心技術(shù)研制的國產(chǎn)“申威26010”眾核處理器。
“神威·太湖之光”也是我國第一臺全部采用國產(chǎn)處理器構(gòu)建的世界排名第一的超級計算機(jī)。
此外,2016年年底,國際高性能計算應(yīng)用最高獎戈登·貝爾獎公布獲獎入選名單中,依托于“神威·太湖之光”的強大計算能力,中國有3項應(yīng)用入圍最終提名,占了總?cè)雵椖康囊话耄?017年三項入圍應(yīng)用中,基于“神威·太湖之光”的應(yīng)用占據(jù)2/3。
在會場對楊廣文教授進(jìn)行了專訪。
楊廣文教授和團(tuán)隊在無錫超級計算中心的主要工作是負(fù)責(zé)“神威·太湖之光”機(jī)器的運維。他介紹,運維的目的就是把超級計算機(jī)用好。首先得好用,然后還要用好,好用不是簡單的管理與調(diào)整機(jī)器,還要做很多國產(chǎn)處理器生態(tài)建設(shè)方面的工作。把程序庫建好、應(yīng)用支撐做好、調(diào)度方法做好,用戶的支持也就做好了,這是最基本的工作。
“當(dāng)然我們不但要讓機(jī)器好用、用好,也要考慮將來超算中心的可持續(xù)發(fā)展,所以除此之外我們還吸引國內(nèi)外的優(yōu)秀科研人員開展大量的研發(fā)工作,支持解決重要科學(xué)問題、重大裝備研發(fā),另外還進(jìn)一步支持產(chǎn)業(yè)升級等,加強研發(fā)是我們的一項重要工作。 ”楊廣文教授說。
他還與我們分享了為什么國家超級計算無錫中心選擇清華大學(xué)的團(tuán)隊去進(jìn)行維護(hù)。他說,超算是一個交叉學(xué)科研究,希望有強的學(xué)科背景,又有超算運維經(jīng)驗的單位來做這個事,這樣就選了清華大學(xué)。因為清華大學(xué)超算級計算及應(yīng)用基礎(chǔ)很好,學(xué)校也希望借助神威·太湖之光的超強計算能力來支持國家的重大需求,因此通過協(xié)商,最終決定由無錫市、清華大學(xué)、江蘇省產(chǎn)業(yè)研究院共同運維這臺世界最大的計算機(jī)。
到目前基于“神威·太湖之光”已完成了20多個應(yīng)用領(lǐng)域上百項應(yīng)用的計算任務(wù),目前完成的整機(jī)應(yīng)用已達(dá)15個,取得一些重要的應(yīng)用成果。
在采訪中了解到,無錫超算中心也就是“神威·太湖之光”接下來會與國家并行計算機(jī)工程技術(shù)中心合作推出小型化機(jī)器,并針對具體應(yīng)用進(jìn)行定制,如支持深度學(xué)習(xí)的專用機(jī)。
關(guān)于無錫超算對深度學(xué)習(xí)的支持,楊廣文教授說:“第一個開發(fā)了大量深度學(xué)習(xí)算法 并行軟件;第二,研發(fā)了一個深度學(xué)習(xí)平臺swCaffe,來支持用戶基于這個進(jìn)行深度學(xué)習(xí)應(yīng)用,目前已開展的應(yīng)用包括圍棋、語音識別、醫(yī)學(xué)圖像識別、遙感圖像分類、地震波余震特征識別、大規(guī)模冷凍電鏡生物大分子模型高精度重構(gòu)等;第三,我們也在布局,與國家并行計算機(jī)工程技術(shù)中心基于申威26010芯片開展小型化機(jī)器研發(fā),特備針對特殊應(yīng)用開展專用機(jī)的研制。進(jìn)一步,可根據(jù)重大應(yīng)用需求,提出一些申威自主芯片的一些改進(jìn)方案,如針對人工智能、深度學(xué)習(xí)做一些定制的芯片,這是一個長期的研究工作?!?/span>
此前曾經(jīng)報道,中美兩國都在開展百億億級的超級計算機(jī),這是超級計算機(jī)發(fā)展的一個目標(biāo),如果實現(xiàn)了百億億級的超級計算,它對人工智能會帶來什么樣的影響?
楊廣文教授說,百億億級的超級計算機(jī)的研制目前是一個國際競爭熱點,我國在十三五期間已進(jìn)行了規(guī)劃。百億億級超級計算機(jī)的研制成功,但對人工智能具有重要的作用,可滿足人工智能對大模型、大數(shù)據(jù)、大計算的需求。但是百億億級的超級計算機(jī)研制成功后,如何更好地支持人工智能技術(shù)的發(fā)展,需要多領(lǐng)域的專家共同努力,研發(fā)大型并行應(yīng)用軟件,共同解決核心問題。
談到AI時代對計算能力的要求,楊廣文教授認(rèn)為以后還是會朝著定制化的方向的發(fā)展。
他認(rèn)為,AI并不見得就是一定要有超算那么大一個機(jī)器來做,現(xiàn)在有很多情況下在數(shù)據(jù)采集的時候就可以進(jìn)行一些處理,所以終端就可能用到高性能計算。終端處理完以后再進(jìn)行數(shù)據(jù)收集、傳輸、存儲,后面再用到超算。
將來針對特殊應(yīng)用做一個定制的系統(tǒng)。芯片可以定制,系統(tǒng)也可以定制,應(yīng)用也可以定制,多個層次的定制,這才是一個比較滿意的系統(tǒng)。