袁紹龍 發(fā)表于:13年10月29日 00:33 [原創(chuàng)] DOIT.com.cn
2013年10月29日,桂林。中國HPC 2013大會在桂林香格里拉酒店正式召開。本次會議由中國計算機學會主辦,中國計算機學會高性能計算專業(yè)委員會和桂林電子科技大學承辦。會議吸引了海內外多家學術機構科研人員、廠商與合作伙伴以及國內媒體人員參加。在本次大會上,來自美國新澤西州立大學的Manish Parashar Rutgers教授分享了主題《Big Data Challenges Simulation-Based Science》的主題演講。Manish Parashar Rutgers教授認為,傳統(tǒng)的HPC的數據傳輸途徑在大數據面前將面臨著挑戰(zhàn),我們需要重新思考數據管理傳輸途徑,并設計盡可能的工作流架構空間。
圖一:美國新澤西州立大學教授Manish Parashar Rutgers發(fā)表演講。
圖二:科學計算與大數據的愿景。
圖三:通過仿真進行科學發(fā)現(xiàn),科學仿真研究運行在高端計算系統(tǒng),并且伴隨有大量的數據產生。
圖四:傳統(tǒng)數據傳輸途徑面臨著挑戰(zhàn),主要包括數據分析挑戰(zhàn)、IO挑戰(zhàn)、數據移動挑戰(zhàn)以及能耗挑戰(zhàn)等。Manish Parashar Rutgers教授認為我們需要重新思考數據傳輸途徑。
圖五:混合數據傳輸需要CPU和IO速度之間的間隙、動態(tài)配置和執(zhí)行數據分析、提升IO寫性能。
圖六:設計盡可能大的數據流架構空間。
圖七:數據管理與分析示意圖。
圖八:為混合數據傳輸設計的共享數據空間。