中國高校最大云上科研智算平臺上線,由復(fù)旦大學(xué)與阿里云共建(云計算高校)
·首個基于CFFF平臺訓(xùn)練的科學(xué)大模型,是復(fù)旦大學(xué)人工智能創(chuàng)新與產(chǎn)業(yè)研究院李昊團隊研發(fā)的45億參數(shù)量的中短期天氣預(yù)報大模型,目前訓(xùn)練成果已正式發(fā)布,并達到國際先進水平。在CFFF平臺上,45億參數(shù)量一天之內(nèi)就能訓(xùn)練完畢。
部署在復(fù)旦校內(nèi)的“近思”一號和托管在1500公里外阿里云烏蘭察布數(shù)據(jù)中心的“切問”一號連成了一臺真正意義上的“超級計算機”。
6月27日,中國高校最大的云上科研智算平臺CFFF(Computing for the Future at Fudan)在復(fù)旦大學(xué)正式上線。
澎湃科技(www.thepaper.cn)了解到,CFFF是為發(fā)現(xiàn)和解決復(fù)雜科學(xué)問題而建設(shè)的科研“超級計算機”,由面向多學(xué)科融合創(chuàng)新的AI for Science(人工智能用于科研)智能計算集群“切問”一號和面向高精尖研究的專用高性能計算集群“近思”一號兩部分組成,二者的名稱來源于復(fù)旦大學(xué)校訓(xùn)“博學(xué)而篤志,切問而近思”。據(jù)介紹,CFFF由復(fù)旦大學(xué)與阿里云、中國電信共同打造,以先進的公共云模式提供超千卡并行智能計算,并支持千億參數(shù)的大模型訓(xùn)練,這在國內(nèi)高校中屬于首例。
平臺啟動儀式上,中國工程院院士、阿里云創(chuàng)始人王堅回憶起2008年剛創(chuàng)辦阿里云時在高校的演講,他表示,自己最初投身云計算的初心,就是“讓每一位學(xué)生都能用得起超算,讓計算發(fā)揮出它的價值?!?5年后CFFF平臺上線,讓王堅感慨自己當(dāng)年的愿望成真。
復(fù)旦大學(xué)校長、中國科學(xué)院院士金力表示,一方面,CFFF作為國內(nèi)高校第一的大規(guī)模異構(gòu)智算平臺,希望它能夠為復(fù)旦的基礎(chǔ)科學(xué)研究提供更強大更穩(wěn)定、更加靈活高效低成本的算力支持。另一方面,希望基于CFFF平臺能夠建成一批具有世界級影響力的科學(xué)大模型,例如生命科學(xué)大模型、大氣科學(xué)大模型、材料科學(xué)大模型、集成電路大模型等。
45億參數(shù)量一天內(nèi)訓(xùn)練完畢
目前,CFFF平臺上的第一個科研成果已經(jīng)誕生,是復(fù)旦大學(xué)人工智能創(chuàng)新與產(chǎn)業(yè)研究院李昊團隊近期發(fā)布了45億參數(shù)量的中短期天氣預(yù)報大模型,預(yù)測效果在公開數(shù)據(jù)集上首次達到業(yè)界公認的ECMWF(歐洲中期天氣預(yù)報中心)集合平均水平,并將預(yù)測速度從原來的小時級縮短到了3秒內(nèi)。據(jù)介紹,這個45億參數(shù)量的大模型只用一天就完成了訓(xùn)練。
李昊在接受澎湃科技等媒體的采訪時介紹,“第一,我們把它的預(yù)報時長延長到了15天;第二,我們做到了歐洲的中期天氣預(yù)報中心的集合平均水平;第三,模型采用的相對數(shù)值模式的推理速度是分鐘級甚至秒級,這也是這個人工智能模型本身的優(yōu)勢?!?/p>
“基于CFFF平臺的千卡并行智能計算,這樣一個規(guī)模的大模型只用一天就完成了訓(xùn)練。傳統(tǒng)的計算平臺是很難做到的?!崩铌徽f。
不過李昊也表示,目前大模型取得的成績更多還是統(tǒng)計意義上的結(jié)果,天氣預(yù)報是一個復(fù)雜的過程,對于臺風(fēng)等極端天氣的預(yù)報還需要在更多實際場景中去驗證模型,也需要跟產(chǎn)業(yè)界更多單位和專家進行合作。
金力表示,未來CFFF平臺還將持續(xù)擴大其算力規(guī)模,并向復(fù)旦校外的科研機構(gòu)、高校、醫(yī)院、高科技企業(yè)等開放。
金力認為,在數(shù)據(jù)和智能技術(shù)驅(qū)動的“大科學(xué)時代”,如何在日新月異的科技創(chuàng)新環(huán)境中贏得主動,在關(guān)鍵領(lǐng)域取得創(chuàng)新突破,是時代給予高校的命題。以CFFF平臺為代表的智算平臺作為一種新興的科研超算架構(gòu),將成為科研的重要支撐力量,極大提升科研效率、降低科研成本,加速科學(xué)原理發(fā)現(xiàn)和技術(shù)突破,并有力推動科學(xué)大模型的落地。
據(jù)復(fù)旦大學(xué)介紹,CFFF平臺從開始建設(shè)的第一天起,就收到了來自復(fù)旦不同院系的多種研究需求,不僅涵蓋生命科學(xué)、大氣科學(xué)、材料科學(xué)領(lǐng)域,也包括金融系統(tǒng)分析等社會科學(xué)研究。平臺上的云原生與低代碼工程化AI開發(fā)平臺,進一步降低了AI與科研融合的門檻。
27日,面向全球科研人員的首屆“世界科學(xué)智能大賽”也宣布正式啟動,大賽設(shè)置生命科學(xué)、量子化學(xué)等五大賽道,CFFF平臺將為參賽隊伍提供免費訓(xùn)練算力,并以更普惠的算力長期支持部分科研項目。
復(fù)旦四校區(qū)所有實驗設(shè)備都能高速接入
在具體技術(shù)層面,部署在復(fù)旦校內(nèi)的“近思”一號和托管在1500公里外阿里云烏蘭察布數(shù)據(jù)中心的“切問”一號連成了一臺真正意義上的“超級計算機”。百G高速數(shù)據(jù)傳輸網(wǎng)和阿里云的大規(guī)模異構(gòu)算力融合調(diào)度技術(shù)、分級存儲技術(shù)、AI與大數(shù)據(jù)一體化技術(shù),讓復(fù)旦四校區(qū)的所有實驗設(shè)備都能高速接入,做到異構(gòu)算力統(tǒng)一管理,計算任務(wù)統(tǒng)一調(diào)度,滿足不同應(yīng)用場景下的科學(xué)智能研究與應(yīng)用需求。位于“東數(shù)西算”節(jié)點上的阿里云烏蘭察布數(shù)據(jù)中心,以公共云模式為復(fù)旦校內(nèi)多學(xué)院的多個科研項目提供更高性能、更具彈性、更低成本和更綠色的智能計算服務(wù)。
復(fù)旦大學(xué)浩清教授、人工智能創(chuàng)新與產(chǎn)業(yè)研究院院長漆遠表示,有賴于公共云模式,跑在CFFF平臺上的項目可享受到超千卡并行的智能算力,千卡并行的有效算力達到行業(yè)領(lǐng)先的92%,可拓展性達到萬卡,萬卡并行有效算力也可達90%。
另外,據(jù)復(fù)旦大學(xué)方面介紹,CFFF平臺還擁有國內(nèi)高校最大規(guī)模的多級數(shù)據(jù)冷熱分層存儲集群,解決了海量科研數(shù)據(jù)無法長期備份的痛點,并支持云上高速傳輸。以往PB級科研數(shù)據(jù)從復(fù)旦校內(nèi)傳到西部數(shù)據(jù)中心需要兩周,如今當(dāng)天就能完成,真正實現(xiàn)了“東數(shù)西算”。
高校與企業(yè)如何合作?
啟動儀式之后,金力和王堅一道接受了媒體采訪。談到此次阿里云與復(fù)旦大學(xué)的合作,王堅和金力均表示,企業(yè)與高校的合作不應(yīng)僅僅局限于產(chǎn)學(xué)研科技成果轉(zhuǎn)化的范疇,而應(yīng)將其看作企業(yè)與高校聯(lián)合創(chuàng)新并聯(lián)合培養(yǎng)人才的活動。
王堅表示,高校和企業(yè)的合作不僅是高校把研究成果轉(zhuǎn)化到企業(yè)這樣一個簡單的關(guān)系,而是可以創(chuàng)造出更多東西?;厮輾v史,IBM和哥倫比亞大學(xué)的合作誕生了計算機專業(yè),MIT和貝爾實驗室的合作誕生了通訊專業(yè),而此次阿里云與復(fù)旦大學(xué)的合作也可以在未來創(chuàng)造更多新的機會。王堅還提到,用GPU(圖形處理器)來做AI計算的方法是高校老師和學(xué)生首先使用的,但產(chǎn)業(yè)界后來將這種方法做成了規(guī)模化,這讓高校和產(chǎn)業(yè)界在創(chuàng)新上有了更好的聯(lián)動。
金力表示,科技飛速發(fā)展為高校如何培養(yǎng)學(xué)生造成了很大挑戰(zhàn),一方面是跨學(xué)科的融合,另一方面是新技術(shù)不斷地產(chǎn)生,為此產(chǎn)教融合非常重要,“這種產(chǎn)教融合不是一個單純的技術(shù)轉(zhuǎn)移的格局,而是創(chuàng)新上和人才培養(yǎng)上高校和企業(yè)密切的互動。創(chuàng)新不是簡單地為企業(yè)解決一個技術(shù),而是能在國際競爭當(dāng)中處于優(yōu)勢地位,在人才培養(yǎng)上企業(yè)能更多看到社會的進步,因此也能讓高校的人才培養(yǎng)看到目標和方向?!?/p>
金力還從復(fù)旦大學(xué)的角度對新一代工程師的培養(yǎng)提出了新的觀點,他表示:“中國發(fā)展到現(xiàn)在,培養(yǎng)工程師除了量的角度,還有一個質(zhì)的角度,也就是我們不僅要培養(yǎng)更多的工程師,還要培養(yǎng)卓越的工程師?!?/p>
“很多人覺得復(fù)旦大學(xué)文科好,后來發(fā)現(xiàn)我們理科也不錯,但是復(fù)旦大學(xué)的工科沒有形成優(yōu)勢。”金力坦言,“原來傳統(tǒng)的工科更多強調(diào)用成熟的技術(shù)和材料去做工程上的實現(xiàn),總是強調(diào)高端、前端,但從產(chǎn)業(yè)角度來說這些東西是沒用的?,F(xiàn)在我們強調(diào)把原創(chuàng)的東西去做工程化的實現(xiàn),希望把沒用的東西變成有用,這就是傳統(tǒng)工科和新工科的區(qū)別?!?/p>