11月3日，《IDC MarketScape： 中國大數(shù)據(jù)管理平臺廠商評估，2020》報告新鮮出爐，這如同中國大數(shù)據(jù)技術(shù)創(chuàng)新與市場競爭格局的晴雨表，從中可以一窺在2020年這樣一個特殊的年份，中國大數(shù)據(jù)市場的發(fā)展與變化。

沒有懸念的是，華為云延續(xù)了自2017年以來在IDC MarketScape中國大數(shù)據(jù)管理平臺廠商評估報告中的優(yōu)勢地位，在最新的2020年報告中仍舊位居領(lǐng)導(dǎo)者象限的領(lǐng)先位置，并且在“市場份額和技術(shù)實力”兩大維度上保持領(lǐng)先。

這份大數(shù)據(jù)報告中究竟藏著哪些乾坤？讓我們逐一解讀……

大數(shù)據(jù)市場格局的變與不變

眾所周知，報告主要對活躍在中國市場上的主流大數(shù)據(jù)廠商從能力、戰(zhàn)略、市場份額三個維度進(jìn)行全面評估。Y軸體現(xiàn)的是一個廠商的綜合能力，集中表現(xiàn)在企業(yè)的產(chǎn)品基本功能、市場表現(xiàn)、團(tuán)隊技術(shù)實力、產(chǎn)品生態(tài)等方面；X軸則反應(yīng)了廠商戰(zhàn)略信息，包括產(chǎn)品戰(zhàn)略、業(yè)務(wù)戰(zhàn)略等；象限中那些五顏六色的氣泡則直觀地體現(xiàn)了各廠商在大數(shù)據(jù)市場的份額。

如此一來，整個IDC MarketScape報告各個象限的含義，以及各廠商的位置就一目了然了。相比往年比較分散的市場格局，進(jìn)入2020年報告的所有廠商都密集分布在“領(lǐng)導(dǎo)者（Leaders）”和“主要玩家（Major Players）”這兩個象限中，而且彼此之間的距離非常接近。這說明，各廠商在大數(shù)據(jù)產(chǎn)品上都下了大力氣，整體技術(shù)水平和創(chuàng)新能力提升較快，市場競爭也越來越激烈。

進(jìn)入報告的廠商，包括AWS、阿里云、Cloudera、華為云、騰訊云（按字母順序，不分先后）等為代表的廠商在報告中處于靠前的位置，引領(lǐng)著整個大數(shù)據(jù)市場的持續(xù)發(fā)展。強(qiáng)者恒強(qiáng)，在2020年的報告中，華為云進(jìn)一步鞏固了原有的領(lǐng)先地位，是無可爭議的行業(yè)領(lǐng)頭羊。但是我們也注意到了今年報告的差異之處，比如，以Cloudera和Kyligence為代表的專業(yè)大數(shù)據(jù)廠商躍升速度很快，比如Kyligence今年首次入榜便一舉進(jìn)入“主要玩家”象限。這說明在大數(shù)據(jù)領(lǐng)域，技術(shù)和理念創(chuàng)新始終是市場和企業(yè)前進(jìn)最大的動力。

能力、戰(zhàn)略、市場

升維思考，降維做事

在報告中，IDC著重談及了這樣一項深刻洞察：在當(dāng)前的大數(shù)據(jù)市場上，技術(shù)創(chuàng)新的速度領(lǐng)先于市場需求的速度。具體而言，技術(shù)提供商在理念和產(chǎn)品上不斷推陳出新，而行業(yè)用戶仍舊在應(yīng)用分析如何入門的門檻上掙扎。因此造成技術(shù)提供能力與用戶需求之間、用戶內(nèi)部業(yè)務(wù)部門與IT 部門之間都存在脫節(jié)，甚至面臨技術(shù)鴻溝。在這樣的背景下，一方面需要理清大數(shù)據(jù)落地的現(xiàn)狀、挑戰(zhàn)，為行業(yè)用戶實現(xiàn)數(shù)字化轉(zhuǎn)型提供參考；另一方面，行業(yè)用戶在選擇大數(shù)據(jù)技術(shù)和解決方案供應(yīng)商時則要更加慎重，兼具領(lǐng)先的技術(shù)創(chuàng)新能力和豐富行業(yè)實踐的供應(yīng)商才是理想之選。華為云FusionInsight之所以能夠穩(wěn)居IDC MarketScape中國大數(shù)據(jù)管理平臺廠商評估報告的領(lǐng)導(dǎo)者象限并引領(lǐng)大數(shù)據(jù)發(fā)展，就是因為具備了這種能力和積淀。

我們就沿用IDC報告的評估標(biāo)準(zhǔn)，從能力、戰(zhàn)略、市場三個維度為華為大數(shù)據(jù)的綜合實力畫個像吧。

首先看技術(shù)和產(chǎn)品能力。華為云FusionInsight智能數(shù)據(jù)湖圍繞數(shù)據(jù)采、存、算、管、用全生命周期管理，是華為云三大使能之?dāng)?shù)據(jù)使能方案的堅實數(shù)據(jù)底座，其主要包含MRS大數(shù)據(jù)、DWS數(shù)據(jù)倉庫、數(shù)據(jù)湖治理中心等云服務(wù)，助力政企客戶實現(xiàn)一企一湖、一城一湖！

在強(qiáng)大技術(shù)能力的支撐下，華為云FusionInsight具備3項硬核能力：

1、讓政企客戶在一個大、快、融、穩(wěn)的數(shù)據(jù)湖架構(gòu)下可持續(xù)演進(jìn)：

     1） 大：傳統(tǒng)大數(shù)據(jù)單集群擴(kuò)容到2000節(jié)點就受限，難以突破。華為云FusionInsight MRS支持2萬＋大規(guī)模單集群，突破擴(kuò)展性瓶頸！同時還可實現(xiàn)集群聯(lián)邦，無限擴(kuò)容，讓政企客戶在一個架構(gòu)下持續(xù)演進(jìn)，無需全新重構(gòu)。大規(guī)模特性已在華為內(nèi)部實踐。華為集團(tuán)IT OneData一萬節(jié)點大集群歷經(jīng)兩次滾動升級，業(yè)務(wù)0中斷，已穩(wěn)定運行六年，華為云FusionInsight使客戶的業(yè)務(wù)系統(tǒng)穩(wěn)如磐石，10年無憂！

     2） 快：傳統(tǒng)大數(shù)據(jù)存在分析鏈路長，以T＋1事后報表為主。華為云FusionInsight MRS 可以T＋0實時增量更新和OLAP分析，讓大數(shù)據(jù)越用越”快“！

     3） 融：傳統(tǒng)大數(shù)據(jù)分析面臨門檻高、協(xié)同難等問題。華為云FusionInsight MRS通過HetuEngine打破地域限制，實現(xiàn)統(tǒng)一SQL，全民BI，讓大數(shù)據(jù)越用越”容易“！

     4） 穩(wěn)：傳統(tǒng)大數(shù)據(jù)運維面臨集群多、升級難等問題。華為云FusionInsight MRS可在線滾動升級，無需拆集群、搬應(yīng)用，業(yè)務(wù)永不停，技術(shù)永最新，服務(wù)永在線，讓客戶業(yè)務(wù)系統(tǒng)穩(wěn)如磐石！

     5） 實時數(shù)據(jù)湖：傳統(tǒng)數(shù)據(jù)湖雖可存儲多樣化數(shù)據(jù)，但仍缺少一些關(guān)鍵能力，比如不支持實時增量更新，不支持事務(wù)，無法實時OLAP等。華為云FusionInsight支持?jǐn)?shù)據(jù)實時批量入湖、實時增量同步，全量數(shù)據(jù)供應(yīng)效率實現(xiàn)T＋0；支持貼源數(shù)據(jù)實時多維分析，縮短分析鏈路，走向?qū)崟r數(shù)據(jù)湖，讓數(shù)據(jù)價值近在眼前！

     6） 云原生數(shù)據(jù)湖：具有統(tǒng)一的元數(shù)據(jù)目錄和存算分離等特性。通過統(tǒng)一數(shù)據(jù)湖目錄，讓大數(shù)據(jù)全局可視；通過存算分離，采用企業(yè)級EC，最低1．2副本，使TCO降低20％＋，讓大數(shù)據(jù)越用越”省“！通過高帶寬大并發(fā)，同成本集群的數(shù)據(jù)讀寫性能領(lǐng)先業(yè)界30％；通過AI容器提升了在科學(xué)計算、機(jī)器學(xué)習(xí)和AI推理的資源利用率。

2、DWS數(shù)據(jù)倉庫：基于分布式架構(gòu)持續(xù)演進(jìn)，構(gòu)筑下一代開放的、全場景分析型數(shù)據(jù)庫，其核心能力如下：

     1）大規(guī)模擴(kuò)展性：基于分布式架構(gòu)，突破大規(guī)模分布式場景下集群通信（Multi－Streams）、邏輯集群（Multi－Groups）技術(shù)，具備2048節(jié)點擴(kuò)展能力；

     2）極致性能：具備多層級全并行計算引擎，可調(diào)度海量的算力資源，通過高效的指令效率，實現(xiàn)數(shù)據(jù)導(dǎo)入快、分析快；

     3）穩(wěn)定可靠：具備硬件和軟件的多層級備份、全方位的故障檢測，實現(xiàn)數(shù)據(jù)無憂，業(yè)務(wù)持續(xù)可用最后，離線擴(kuò)容、半在線擴(kuò)容、在線擴(kuò)容技術(shù)能夠從容應(yīng)對客戶不同的擴(kuò)容需求。

3、數(shù)據(jù)治理：一站式數(shù)據(jù)湖治理中心，助力企業(yè)快速構(gòu)建從數(shù)據(jù)接入到數(shù)據(jù)分析的E2E數(shù)據(jù)治理體系，消除數(shù)據(jù)孤島，統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)，加速數(shù)據(jù)資產(chǎn)化和企業(yè)的數(shù)字化轉(zhuǎn)型。

     1）通過全域數(shù)據(jù)視圖統(tǒng)一信息架構(gòu)，統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)，數(shù)據(jù)指標(biāo)，實現(xiàn)數(shù)據(jù)分層，數(shù)據(jù)建模；

     2）通過一站式全棧平臺實現(xiàn)30＋異構(gòu)數(shù)據(jù)源的高效數(shù)據(jù)集成，SQL＆Spark＆MR等多種數(shù)據(jù)開發(fā)，無需編碼極簡數(shù)據(jù)開放，一鍵導(dǎo)入導(dǎo)出完整數(shù)據(jù)模型實現(xiàn)數(shù)據(jù)資產(chǎn)的快速復(fù)制；

     3）擁有開放完備的安全體系，數(shù)據(jù)分級分類，統(tǒng)一安全認(rèn)證。

截至目前，華為云FusionInsight持續(xù)投入，擁有10年＋豐富經(jīng)驗的大數(shù)據(jù)內(nèi)核團(tuán)隊，已獲取專利500＋，具有30＋PMC＆Committer大數(shù)據(jù)專家，與世界同行，做好數(shù)字世界的黑土地。同時堅定開放路線，為開發(fā)者、客戶和伙伴開放了CarbonData 和openLooKeng。華為云FusionInsight堅持將好的經(jīng)驗，持續(xù)在華為云大數(shù)據(jù)社區(qū)上為伙伴和客戶開放，共建社區(qū)繁榮生態(tài)！可見華為云大數(shù)據(jù)勇攀技術(shù)高峰的決心！

其次看市場地位。從每一筆訂單的簽訂到每一個項目的落地，再到每一位客戶的成功，華為云大數(shù)據(jù)就是在這樣一點一滴的積累中逐步擴(kuò)大著市場領(lǐng)先優(yōu)勢。

IDC的統(tǒng)計數(shù)據(jù)顯示，2020年，中國大數(shù)據(jù)技術(shù)與服務(wù)市場收益前三的行業(yè)是金融、政府和運營商，三者總和占中國大數(shù)據(jù)整體市場的50％以上；同樣具有海量數(shù)據(jù)的互聯(lián)網(wǎng)、視頻直播、跨境電商等客戶，也逐漸認(rèn)可并采購華為云大數(shù)據(jù)相關(guān)產(chǎn)品。華為云大數(shù)據(jù)落地成功也集中體現(xiàn)在這些領(lǐng)域。舉例來說，在金融行業(yè)，中國50％的TOP20金融客戶均已使用華為云FusionInsight構(gòu)建其大數(shù)據(jù)平臺，在某行構(gòu)建金融數(shù)據(jù)湖，實現(xiàn)一份數(shù)據(jù)全局可用，免除數(shù)據(jù)搬遷，提升業(yè)務(wù)協(xié)同效率10倍，存儲周期提升2倍，資源利用率最大可達(dá)90％，同時利用大數(shù)據(jù)＋AI實現(xiàn)了金融行業(yè)的實時風(fēng)控功能，從事前風(fēng)控轉(zhuǎn)變?yōu)槭轮袛r截風(fēng)險交易，已挽回?fù)p失數(shù)億元；在政府行業(yè)，華為云FusionInsight承載了國內(nèi)70％的平安城市建設(shè)，50％的智慧城市、數(shù)字城市建設(shè)。由于今年突發(fā)疫情，華為云FusionInsight結(jié)合行業(yè)積累經(jīng)驗，僅用20＋天實現(xiàn)全國陸續(xù)上線疫情防控大數(shù)據(jù)平臺，上線后在某市，從3000萬人口中秒級找到疑似人群，高效的支撐了全國新冠肺炎疫情防控工作；在運營商行業(yè)，中國三大運營商均使用華為云FusionInsight構(gòu)建數(shù)據(jù)平臺，廣東移動基于華為云FusionInsight，聯(lián)合政企客戶共同打造智慧電網(wǎng)、智慧交通、智慧港口、高清視頻等系列標(biāo)桿應(yīng)用，打通數(shù)據(jù)全生命周期鏈路，實現(xiàn)對內(nèi)業(yè)務(wù)支撐、對外應(yīng)用賦能，全面支撐了各類政務(wù)、民生等大數(shù)據(jù)應(yīng)用服務(wù)。同時，華為堅持“自己的降落傘自己先跳”，華為集團(tuán)IT通過FusionInsight構(gòu)建OneData大數(shù)據(jù)集群，實現(xiàn)大數(shù)據(jù)平臺在大規(guī)模場景下的開拓，OneData集群其規(guī)模已至1萬＋節(jié)點；同時，實現(xiàn)了統(tǒng)一的數(shù)據(jù)管理服務(wù)，在菩提海UniDB產(chǎn)品中，通過邏輯統(tǒng)一方式，把50＋物理分散的計算集群（Hadoop＋MPP），基于五統(tǒng)一（數(shù)據(jù)安全，元數(shù)據(jù)目錄，數(shù)據(jù)集成，數(shù)據(jù)訪問，任務(wù)調(diào)度），整合成湖倉一體的架構(gòu)，支撐上千個企業(yè)租戶的PB級數(shù)據(jù)分析處理需求。華為集團(tuán)IT OneData大集群歷經(jīng)兩次滾動升級，業(yè)務(wù)0中斷，已穩(wěn)定運行六年。從上面案例可知，華為云FusionInsight將是政企客戶的標(biāo)準(zhǔn)底座，可實現(xiàn)一企一湖、一城一湖，一站式支撐多場景高效分析。

截至2020 年10月底，華為云FusionInsight智能數(shù)據(jù)湖已服務(wù)60＋個國家和地區(qū)、3000＋客戶，覆蓋政府、金融、運營商、電力、傳媒、醫(yī)療、教育、交通、油氣、物流、零售、制造、互聯(lián)網(wǎng)等諸多行業(yè)，助力客戶以數(shù)據(jù)驅(qū)動業(yè)務(wù)增長和商業(yè)成功，使政企客戶可基于華為云FusionInsight實現(xiàn)“一企一湖，一城一湖”！

華為云FusionInsight的產(chǎn)品功能、創(chuàng)新能力、實踐成果、生態(tài)體系建設(shè)得到了市場層面的充分肯定：華為云FusionInsight MRS把“復(fù)雜”留給自己，把“簡單”留給伙伴，共建社區(qū)繁榮生態(tài)，聯(lián)合800＋I(xiàn)SV，共創(chuàng)共贏，助力政企數(shù)字化轉(zhuǎn)型成功！2020年，華為云FusionInsight除過在本次穩(wěn)居IDC MarketScape中國大數(shù)據(jù)管理平臺領(lǐng)導(dǎo)者象限，其市場份額和技術(shù)實力雙領(lǐng)先，華為云FusionInsight還連續(xù)四年入圍中國大數(shù)據(jù)企業(yè)50強(qiáng)，并榮獲中國信息通信大數(shù)據(jù)行業(yè)影響力獎、中國大數(shù)據(jù)平臺類最佳解決方案獎……

最后再來談?wù)剳?zhàn)略。華為云FusionInsight自2009年開始投入研究，并于2014年開始推出商用化產(chǎn)品，堅持技術(shù)創(chuàng)新，并始終秉承開源開放的理念，踐行“平臺＋生態(tài)”戰(zhàn)略，攜手800＋合作伙伴，為政企客戶提供“懂行”的大數(shù)據(jù)解決方案。所謂懂行，一方面要不斷深入理解客戶不斷發(fā)展的業(yè)務(wù)訴求，另一方面，要持續(xù)技術(shù)創(chuàng)新并引領(lǐng)行業(yè)發(fā)展，商業(yè)訴求＋技術(shù)創(chuàng)新雙輪驅(qū)動行業(yè)可持續(xù)、高質(zhì)量發(fā)展，“用數(shù)”助力客戶商業(yè)成功！上面的論述已經(jīng)充分證明，華為是“懂行”的大數(shù)據(jù)專家。

進(jìn)入智能數(shù)據(jù)時代，隨著大數(shù)據(jù)技術(shù)更加成熟，以及5G、AI、IoT技術(shù)的規(guī)�；�商用，政企客戶在商業(yè)訴求與技術(shù)創(chuàng)新的雙輪驅(qū)動下，不斷深化數(shù)字化轉(zhuǎn)型，并向智能化升級。企業(yè)構(gòu)建技術(shù)領(lǐng)先的大數(shù)據(jù)平臺，應(yīng)該選擇具有競爭力的數(shù)據(jù)底座。數(shù)據(jù)的增長是無限的，小集群總會成長為大集群，一個技術(shù)領(lǐng)先、可平滑升級、可持續(xù)演進(jìn)的數(shù)據(jù)底座非常重要。華為云FusionInsight智能數(shù)據(jù)湖的愿景就是打造技術(shù)領(lǐng)先的大數(shù)據(jù)底座，助力客戶實現(xiàn)一企一湖一城一湖！

大數(shù)據(jù)市場拐點將現(xiàn)

IDC預(yù)測，中國大數(shù)據(jù)市場規(guī)模將在2020年達(dá)到104．2億美元。大數(shù)據(jù)市場已經(jīng)熱了多年，市場快速演進(jìn)、技術(shù)持續(xù)升級、客戶需求不斷升溫，再加上利好政策的刺激，新的市場拐點可能會很快出現(xiàn)。

2020《政府工作報告》中明確提出要“推進(jìn)要素市場化配置改革”，以及“培育技術(shù)和數(shù)據(jù)市場，激活各類要素潛能”。數(shù)據(jù)作為新的市場要素，其重要性和價值得到進(jìn)一步彰顯。大數(shù)據(jù)將在企業(yè)從數(shù)字化轉(zhuǎn)型到智能化升級的轉(zhuǎn)變中發(fā)揮不可替代的作用，而建設(shè)大數(shù)據(jù)平臺依然是行業(yè)用戶的“剛需”，并在新基建、十四五等戰(zhàn)略中持續(xù)構(gòu)筑數(shù)據(jù)堅實底座，助力政企數(shù)字化轉(zhuǎn)型。IDC預(yù)測，2019－2024年，數(shù)據(jù)的復(fù)合增長率將保持在26％，呈幾何級數(shù)增長的數(shù)據(jù)量將給數(shù)據(jù)的存儲、管理和分析帶來更大的壓力和全新的挑戰(zhàn)。這一方面要求在大數(shù)據(jù)技術(shù)上不斷尋求新的突破和創(chuàng)新，包括湖倉一體、實時數(shù)據(jù)湖、交互式分析等將成為新的熱點；另一方面，在商業(yè)模式上，企業(yè)也需要不斷調(diào)整、擴(kuò)展業(yè)務(wù)邊界，加強(qiáng)生態(tài)合作，增強(qiáng)企業(yè)與外部間的數(shù)據(jù)交互，這對數(shù)據(jù)集成、開發(fā)、實時入湖分析等將產(chǎn)生積極的促進(jìn)作用。

談到未來大數(shù)據(jù)應(yīng)用的發(fā)展趨勢，IDC概括了兩點：一是主流廠商都在積極拓展大數(shù)據(jù)解決方案，強(qiáng)化數(shù)據(jù)治理能力，建立數(shù)據(jù)服務(wù)能力，進(jìn)一步降低數(shù)據(jù)分析的復(fù)雜性；二是數(shù)據(jù)管理平臺要進(jìn)一步簡化和統(tǒng)一，在數(shù)據(jù)庫、數(shù)倉、大數(shù)據(jù)平臺、數(shù)據(jù)湖等混合環(huán)境中，簡化數(shù)據(jù)管理、提高用數(shù)效率是首要任務(wù)。到2020年，大數(shù)據(jù)技術(shù)創(chuàng)新趨勢的焦點已轉(zhuǎn)向LakeHouse、企業(yè)創(chuàng)新焦點已轉(zhuǎn)向湖倉一體，讓大數(shù)據(jù)與數(shù)倉互聯(lián)互通、協(xié)同計算，兼顧過去與未來！從華為云的技術(shù)創(chuàng)新和行業(yè)實踐來看，這兩方面的考慮都已經(jīng)在落地和不斷推進(jìn)之中。