學術科研
您當前的位置:首頁 > 新聞動態(tài) > 學術科研
高能所首次利用“超算快線”實現(xiàn)海量數(shù)據(jù)遠程傳輸與處理
文章來源:計算中心  2024-03-11
】 【】 【

202436日,中國科學院高能物理研究所(簡稱“高能所“)聯(lián)合中國電信研究院和國家超級計算成都中心(簡稱“成都超算“),基于中國電信推出的“超算快線“解決方案,在中國電信大科創(chuàng)裝置+城域網(wǎng)上提供了跨域10G數(shù)據(jù)專線,完成了業(yè)界首次跨2000公里把1.6TB數(shù)據(jù)在40分鐘內從客戶側傳輸?shù)匠啥汲阒行牡臄?shù)據(jù)快速傳輸驗證,本次驗證將提升高海拔宇宙線觀測站“拉索(LHAASO)” 利用超級計算機探索解決宇宙線起源問題的能力,為“東數(shù)西算”的大數(shù)據(jù)跨域自動調度提供了創(chuàng)新的解決方案。

試驗過程中,高能所作業(yè)調度系統(tǒng)根據(jù)”拉索“計算任務特性、超算節(jié)點算力資源和計算數(shù)據(jù)傳送要求,成功通過超算快線API接口申請夜間閑時帶寬,把網(wǎng)絡專線帶寬在從50Mbps提升到10Gbps,服務類型從盡力而為切換到低時延保障(雙向時延從72ms縮短至32ms),在預定任務時間內把”拉索“部分數(shù)據(jù)傳送到成都超算完成計算任務,計算完成后結果傳送回高能所,網(wǎng)絡恢復原狀。試驗充分驗證了”超算快線“任務式協(xié)同調度、秒級彈性服務和G級跨域傳輸能力,試驗效果獲得了良好的效果。后續(xù),高能所、中國電信研究院和成都超算中心將對該方案持續(xù)進行優(yōu)化和完善,力爭實現(xiàn)海量科學數(shù)據(jù)的遠程按需訪問和處理,為前沿科學研究提供強大的計算支撐。

為解決算力資源不足的難題,高能所努力探索利用超算中心等第三方算力資源作為補充,研發(fā)了跨算力中心的統(tǒng)一作業(yè)調度系統(tǒng)、數(shù)據(jù)存儲系統(tǒng)和網(wǎng)絡管理系統(tǒng),面向用戶提供單一的計算系統(tǒng)視圖。但由于固定網(wǎng)絡專線的費用和帶寬等原因,科學大數(shù)據(jù)傳輸成為制約使用第三方算力資源的主要瓶頸,如何提高網(wǎng)絡傳輸性價比已成為目前亟待解決的問題。中國電信研究院“超算快線“采用PON接入方案,通過支持IPv6+業(yè)務網(wǎng)關和業(yè)務網(wǎng)控制技術,實現(xiàn)了低成本、智能化的海量數(shù)據(jù)從客戶側傳輸?shù)匠阒行牡男枨?,解決了一直困擾科研界的一大“痛點“難題。本次試驗成功,將有助于高能所加快應用運營商提供的大帶寬、高彈性、自助式的普惠易用的網(wǎng)絡服務,支撐國家戰(zhàn)略性科學研究以及國家數(shù)字經(jīng)濟高質量發(fā)展。

LHAASO是以宇宙線觀測研究為核心的國家重大科技基礎設施,位于四川省稻城縣海拔4410米的海子山,是由5216個電磁粒子探測器和1188個繆子探測器組成的一平方公里地面簇射粒子探測器陣列、7.8萬平方米水切倫科夫探測器陣列以及由18臺廣角切倫科夫望遠鏡組成的復合陣列。LHAASO20217月建成并開始高質量穩(wěn)定運行,是國際上最靈敏的超高能伽馬射線探測裝置,每年產(chǎn)生10PB級的科學數(shù)據(jù),采用大規(guī)模的計算集群進行分析和處理,已經(jīng)取得多項重要的科學發(fā)現(xiàn)成果。



附件下載:

地址:北京市918信箱 郵編:100049 電話:86-10-88235008 Email:ihep@ihep.ac.cn
中國科學院高能物理研究所 備案序號:京ICP備05002790號-1 文保網(wǎng)安備案號: 110402500050