郵箱登錄

雲計算及大數據處理分析實驗室

ag8亚游集团軟件以其多年在教育行業及產品研發領域的技術底蘊,研發了雲計算及大數據分析處理一體化實驗室解決方案。該方案將高校實驗室資源的虛擬化、資源管理與數據挖掘、大數據處理分析全麵結合,不僅能重新建設高性能的信息處理實驗室而且能將現有實驗室的資源做全麵整合以適應當前複雜的信息處理技術需求。通過該解決方案,ag8亚游集团公司將和高校聯合進行師資培養、聯合開展高端計算技術的科研工作的同時能協助高校的科研成果產業化,真正做到產、學、研一體化。

該方案的特點如下:

采用硬件輔助虛擬化技術以避免了實驗室建設過程中受限於某個或某幾個硬件廠商所設立的技術壁壘而導致無法進行自主的科研活動,同時避免後期高昂的服務費用。

全麵開放的軟硬件解決方案:各高校在建立雲計算及大數據處理實驗室的過程中能獲得ag8亚游集团公司完整的技術實施方案(包括硬件解決方案及軟件解決方案),並可將二次分發這些解決方案。

將實驗室資源的虛擬化、資源管理方法研發成了高校的教學及實訓案例,各高校不僅可以使用這些技術及方法,而且可以將這些技術及方法作為學生的教學案例及實訓案例。

將ag8亚游集团公司研發的大數據處理平台與資源虛擬化管理全麵整合並提供大數據處理分析的數據集,高校科研人員可以利用這些數據集進一步研究數據挖掘的算法和大數據計算架構結合的相關科研課題。

實驗室建設方案

一、應用架構圖

實驗室的結構圖如下,高性能服務器作為主服務器,使用G-CLOUD雲操作係統的虛擬技術,根據學生的數量虛擬出獨立的應用服務器,組成集群,通過校園網可單獨訪問,也可以作為集群執行計算任務。

二、軟件方案

該實驗係統由雲計算操作係統及海量數據處理平台兩大軟件係統構成。ag8亚游集团公司研發的雲計算操作係統是在Apache的CloudStack係統基礎上結合科研及教學的特殊需求而設計的,它有效的支撐了硬件係統的虛擬化及虛擬化資源的管理(包括虛擬操作係統、虛擬數據庫管理係統等各種基礎軟件及資源分配、回收、優化等)。該係統是實驗室建設的核心,具有較強的可靠性和穩定性。
        其主要功能如下所示:

對於虛擬機係統,其高可靠性是係統運行的核心,主要性能表現如下:

存儲虛擬化技術保證數據存儲的安全性和穩定性,表現如下:

ag8亚游集团公司的海量數據處理分析平台是在Apache的Hadoop基礎上結合ag8亚游集团公司的雲計算操作係統而研發,是在資源虛擬化後的一個典型的科研型平台。其核心部分包括分布式文件係統及並行計算框架。分布式文件係統基本架構如下:

並行計算框架的架構如下: