在信息技術突飛猛進的大背景下,數據已經成為繼土地、資本、技術和勞動力之外的又一新生產要素,推動社會生產力進入更高的層面。而要讓數據真正發揮出經濟要素的價值,算力是必不可少的基礎。近年來,數據中心的建設在中國大地上如火如荼地開展著,既有新數據中心拔地而起,也有舊數據中心的升級改造。算力已成為衡量中國建設奇跡的又一指標進入大眾的視野。

論壇現場

近日,世界三大超算盛會之一,中國高性能計算領域具有高度影響力的中國計算機學會全國高性能計算學術年會(CCF HPC China 2023),在青島·紅島國際會議展覽中心閉幕。在25日大會主題分論壇-超算賦能大模型發展應用論壇上,來自國家超級計算深圳中心、西安電子科技大學、中國海洋大學、北京超級云計算中心、北京智象未來、透徹未來等超級計算、智能計算企業及科研機構的專家學者、行業精英齊聚一堂,分享交流中國超級計算及大模型的發展現狀與未來趨勢。

中國科學院計算機網絡信息中心總工程師遲學斌

在論壇致辭環節中,中國科學院計算機網絡信息中心總工程師遲學斌表示:“超算和智算融合發展是未來的必然趨勢,超算的發展將為智算帶來更多可能。”

國家超級計算深圳中心主任馮圣中

國家超級計算深圳中心主任馮圣中引用偉人名篇《紅旗到底能打多久》作為報告的主題,但他指出,相比于井岡山當年的星星之火孤星照耀中國革命的未來,如今中國的超級計算事業發展已遠遠不是星星之火,而已成燎原之勢在大地上蔓延。對于決策者來說,他們最需要思考的問題兩點,一是在本地區需要建立多大規模的超算中心。二是應該選擇發展智算還是超算。

隨著人工智能技術和應用的成熟,社會各個行業對算力需求都呈現出爆炸式增長,未來多大的算力才能滿足地區發展的需要是很難估量的問題,即使是置身業內的專業人事,其估算也往往保守。應該說這個問題沒有一個確切的答案,而需要決策者隨時關注行業整體,定相對彈性的建設方案,能夠根據不同時期的發展進行調整。同時,在人工智能應用的推動下,算力建設也有了智能的需求,從總的趨勢來看,未來的算力一定是越來越智能化。

西安電子科技大學朱虎明

西安電子科技大學朱虎明教授則分析了GPU的發展歷程,尤其是分析了為何英偉達能夠在當前的人工智能大潮當中脫穎而出。他總結數據、算法和大算力是AI時代的三大要素,而英偉達的成功得益于其很早開始投入通用軟件的研發,并建立起了一個龐大的生態。這是讓其從昔日與英特爾、AMD在GPU市場三分天下最終變成一家獨大的關鍵原因。同時,他介紹了世界上一些著名超算中心其架構,如Aurora超級計算機,這是英特爾和美國能源部阿拉貢國家實驗室最近合作的一個超算中心,就是采用了英特爾的CPU和英特爾的Xe GPU架構。而國內的神威E系統、國防科大E系統等架構各不相同,這些系統未來能否長期堅持,開拓出自己的豐富生態,是中國超算能否破局質變的關鍵。

北京超級云計算中心CTO甄亞楠

北京超級云計算中心CTO甄亞楠表示,隨著去年年底ChatGPT的流行帶動,算力已成為大模型訓練的重要基礎設施,國內外紛紛建設由高端芯片組成的大規模算力集群。大模型訓練與推理為超算帶來了巨大機遇,根據OpenAI的估算,目前大模型訓練對算力的需求大約每3至4月翻一倍,遠超摩爾定律18至24個月翻倍的速度。北京超級云計算中心自2014年投入運營以來,以基于高性能RDMA網絡,將多個服務器進行全線速互聯,提供高帶寬、低時延的通信能力,能充分滿足大模型訓練對算力基礎設施日益增長的需求,事實證明,基于超算架構的算力更適用于大模型的訓練與推理。

北京智象未來聯合創始人兼首席運營官王科

北京智象未來聯合創始人兼首席運營官王科系統梳理了深度學習發展歷程,特別介紹了多模態的基本理論和在中的應用。他做出一個精辟的總結,認為人與人之間的各種交流形式,無論是通過聲音還是光影圖像,本質上也是以一種多模態的形式進行。因此,對多模態的研究和應用將會創造出一個類似我們現實的新世界,觸發人類新的交流、創造形式,進而改變世界未來,解放創造了,提高生產力。

透徹未來聯合創始人兼首席技術官王書浩

中國海洋大學仲國強

另外,透徹未來聯合創始人兼首席技術官王書浩和中國海洋大學仲國強也分別結合企業業務和個人研究領域,介紹了超算、人工智能在海洋環境監測與病理檢測方面的應用技術、案例。

高峰對話:大模型算力,荒?

在圓桌討論會上,針對如何應對大模型發展中的算力瓶頸,與會專家指出:可通過推進供需對接,加速算力網絡變革,實現算力的集中管理和高效利用;優化算法和架構,通過分布式計算充分利用計算資源,提高計算速度和效率;另外專家們呼吁各方力量一起推動國產芯片技術的創新研發及應用生態的建設。

CCF HPC China 2023作為我國高性能計算領域的盛會,在行業中起到了“放大器”作用, 通過前沿學術成果交流,創新應用技術展示,促進超算技術應用生態與科研、產業數字化升級轉型,彰顯了在國家政策大力推動和行業應用強力拉動之下,我國在超算領域的全新魅力。北京超級云計算中心作為北京市人民政府主導、院市共建的“北京超級云計算和國家重要信息化基礎平臺”,成立十余載,致力于以超算中心的市場化運營,助力國家科技創新與數字經濟發展。透過這場論壇,我們可以清晰地看到我國各行各業在面對AI時代來臨所展現的勃勃生機,我們正在為數字中國、科技強國的建設鋪路筑基。