中國數字經濟資訊與服務平臺

華為FusionData智能數據解決方案三大組件破解三大數據難題

2017年12月,華為發布新的愿景和使命—把數字世界帶入每個人、每個家庭、每個組織,構建萬物互聯的智能世界。這家ICT巨頭對IT業務的重視程度上升了一個新的層次,對于數據,對于數據智能相關的技術,包括云計算,AI,大數據等相關技術也越發重視。

2019年6月5日,華為發布智能數據解決方案FusionData,這是一個智能的數據全生命周期管理方案,從數據接入、數據處理和數據使能三個層面,重定義數據基礎設施。這次發布,并不是從無到有的宣布重大技術產品,而是多種現有方案的一個整合方案,意在突出華為數據智能服務能力,與華為整體愿景有契合度。

這次發布會,凸顯了華為對于數據智能,對于數據智能產品領域的重視,以及華為在當下的狀態,置身于發布會現場,能感覺到現場的氛圍不同于以往的許多類似活動。

首先,從華為Cloud & AI產品與服務總裁侯金龍的一番談話中能感受到,多年來華為積累的技術能力,正在涌現為創新與顛覆的力量,全新的智能數據解決方案FusionData所強調的重新定義和重新塑造與以往的含義更深,有意跳出現有的計算架構,重新構建大數據時代的架構,在成本、效率、管理和使用上都帶來變化。

另外,有感于在這次發布會現場見到了華為多位高層,筆者看到,就連從沒參與過產品發布的華為EBG中國區總裁蔡英華也首次參與了這次大會,有熟悉華為的資深媒體人士認為,這一現象可見華為的內部協同做的更好了。不久前,有媒體在采訪任正非時聞到如何看待華為現在的狀態,任正非則表示,面對一些外部的挑戰壓力,華為的狀態更好了。

此次發布的新解決方案,華為渲染了數據庫的概念,智能數據解決方案FusionData是構建數據湖能力的重要基礎,華為對于數據湖的理解,是在未來,讓一家企業有一個數據湖,一座城市有一個數據湖,以此滿足居民的生產與生活、企業的運營和發展、城市政府的管理和服務等各項需求。

重構數據基礎設施可破解三大數據應用難題

華為IT產品線副總裁、智能數據與存儲領域總裁周躍峰將大數據時代,數據應用面臨的問題總結為三大難題:數據接入難,融合分析難和消費難,三大難題難在哪兒呢?

首先,數據接入端需要接入非常多的接入點,一家大型企業可能需要上萬個接入點,而且數據接口協議不同意,經常需要做協議轉化,拉長了數據的接入周期。

融合分析方面,現有的系統非常復雜,包括分享預防、產品定價、智慧物流等系統各自有相對獨立的垂直架構,煙囪式建設的系統間,進行融合分析時,數據分析鏈路長,多系統集成難度非常大,導致開發周期長。

最后在數據使用階段,當數據量非常大的時候,在茫茫多的數據中找目標數據無異于大海撈針,當從130多萬張表中找尋目標數據,大概需要三十天的時間,找到數據后,還需要把數據加工成業務可用的數據,耗時也非常久。

華為提出應該用新的架構來重構數據的基礎設施,周躍峰將這一架構概括為五層:

底層是計算能力,用多樣計算能力匹配多樣的數據,多樣的計算能力指的是x86,ARM,GPU,NPU這樣不同架構。

數據接入層,要引入多樣性的數據連接,加速數據流動,讓數據與應用連接的更高效。

數據存儲層,從單一類型存儲變為多樣性的融合存儲,打造融合處理數據,以此提升效率。

數據處理層,要變單一處理為智能融合處理,同時對多種數據進行綜合分析,數據分析考慮不同數據的相關性。

最后是數據使能層,在功能定位上類似于現在比較火的數據中臺的概念,聯通數據處理與業務創新,供各行各業的應用開發合作伙伴使用。

華為的產品線比較齊全,使得他可以從五個層次入手,解決三大數據難題。

智能數據解決方案FusionData三大部件

智能數據解決方案FusionData將五層數據基礎架構概括為三層,也可以叫做FusionData的三大部件:數據接入部件,數據處理部件和數據使能部件。

第一大部件:數據接入部件。

數據接入方面,頗有韓信點兵多多益善的意思。華為智能數據連接部件ROMA首先強調開放性,可接入多種框架,可接入一千一百多種應用與數據。管理方面,消息和API采用統一的方式進行管理,實現多云跨數據中心的數據調度管理,另外,還將采用智能多通道技術加快數據流動速,快速將數據匯聚起來。

第二大部件:數據處理部件。

數據處理的部分其實包含了計算,存儲和分析三方面的能力,整合了華為IT技術部分比較核心的資產,可以說,FusionData是將華為多種數據Fusion(這里主要指的是FusionStorage和FusionInsight)能力深度Fusion(融合)在了一個方案里。

計算方面除了x86,GPU以外,華為自己在大力構建基于ARM的計算以及存儲產品。存儲系統方面,華為存儲FusionStorage 8.0用一套存儲系統同時多種存儲場景,一套設備支持數據全生命周期場景,此外,對應還有最近發布的GaussDB數據庫。分析方面主要就是華為的FusionInsight了。

首先,從存儲的角度看。這套系統得益于分布式存儲能將計算和存儲分離的特性,從業務應用的維度打破了上文提到的煙囪式系統架構帶來的問題,應用間彼此割裂,底層數據有孤島,而現在底層數據有了統一的存儲平臺。

其次,從分析的角度看。由于分布式存儲同時支持塊、文件、對象、HDFS、數據庫協議等多種協議的融合特性,將多種數據類型匯總到一個平臺里,為融合分析提供了可能,縮短了數據分析鏈路,以及多系統集成的難度。最后,在這一基礎上,通過融合分析引擎對數據進行統一調度,統一分析。

第三大部件:數據使能部件。

按理說,數據使能部件的能力是有了數據處理DAYU(大禹)部件之后水到渠成的事兒,其實不然,DAYU大禹為下層的數據處理和業務創新提供了很多便利條件,比如,用AI的能力感知和采集元數據,然后分級分類,然后納管到數據視圖里,以此來提升找數據的效率。另外,為了方便把數據用起來,面向外部還提供了統一的訪問接口,簡化了使用數據的操作。

最后,DAYU的中文名字會讓人聯想到大禹治水,按照周躍峰的說法是,大禹治水,能讓數據洪流不再可怕,讓數據變為滋養我們生命的營養。

結語

這次發布會上看到,華為在努力跳出一些框架,換言之就是有意跳出別人定義好的規則,長期以來,而這背后靠的是華為在技術研發上的大力投入。

在華為看來,自研技術是為了提升自身對于未來科技發展的理解力。在一些方案領域,在采用合作伙伴的技術方案的同時,自己也會研究一些方案,既增強了與伙伴的合作,又能提供多樣化的解決方案。

在這次發布會上,招商銀行的專家介紹了在技術架構上的創新,以及華為方案對于其業務上帶來的價值,其中提到了華為不久前才發布的GaussDB數據庫,原來,華為的高斯數據庫早就應用在招商銀行里了。

這件事兒能說明兩個問題,一方面,這說明了華為與用戶保持著很好的合作關系,另一方面,華為可能還有更多隱藏的已經在研究但是還沒公開的技術,等到公開的時候,直接就是一個趨于成熟的方案了。

未經允許不得轉載:DOIT » 華為FusionData智能數據解決方案三大組件破解三大數據難題
分享到: 更多 (0)
河北快3推荐号码今天