<p id="l5xfl"></p>

    <form id="l5xfl"></form><address id="l5xfl"></address><form id="l5xfl"><nobr id="l5xfl"><nobr id="l5xfl"></nobr></nobr></form><em id="l5xfl"></em>

        <form id="l5xfl"></form>

              免費服務熱線:400-0755-667 直線電話:17817818586

              國際大數據行業發展分析

              來源:中國信息通信研究院  瀏覽數:  發表日期:
                近年來,全球大數據的發展仍處于活躍階段。根據國際權威機構Statista 的統計和預測,全球數據量在 2019 年有望達到 41ZB。

              圖表:全球每年產生數據量估算圖
                2019 年以來,全球大數據技術、產業、應用等多方面的發展呈現了新的趨勢,也正在進入新的階段。本章將對國外大數據戰略、技術、產業等領域的最新進展進行簡要敘述。
               ?。ㄒ唬┐髷祿鹇猿掷m拓展
                相對于幾年前,2019 年國外大數據發展在政策方面略顯平淡,只有美國的《聯邦數據戰略第一年度行動計劃(Federal Data StrategyYear-1 Action Plan)》草案比較受到關注。
                2019 年 6 月 5 日,美國發布了《聯邦數據戰略第一年度行動計劃》草案,這個草案包含了每個機構開展工作的具體可交付成果,以及由多個機構共同協作推動的政府行動,旨在編纂聯邦機構如何利用計劃、統計和任務支持數據作為戰略資產來發展經濟、提高聯邦政府的效率、促進監督和提高透明度2。
                相對于三年前頒布的《聯邦大數據研發戰略計劃》,美國對于數據的重視程度繼續提升,并出現了聚焦點從“技術”到“資產”的轉變,其中更是著重提到了金融數據和地理信息數據的標準統一問題。此外,配套文件中“共享行動:政府范圍內的數據服務”成為亮點,針對數據跨機構協同與共享,從執行機構到時間節點都進行了戰略部署。
                早些時候,歐洲議會通過了一項決議,敦促歐盟及其成員國創造一個“繁榮的數據驅動經濟”。該決議預計,到 2020 年,歐盟國內生產總值將因更好的數據使用而增加 1.9%。但遺憾的是,據統計目前只有 1.7%的公司充分利用了先進的數字技術。
                拓寬和深入大數據技術應用是各國數據戰略的共識之處。據了解,美國 2020 年人口普查有望采用差分隱私等大數據隱私保護技術來提高對個人信息的保護。英國政府統計部門正在探索利用交通數據,通過大數據分析及時跟蹤英國經濟走勢,提供預警服務,幫助政府進行精準決策。
               ?。ǘ┐髷祿讓蛹夹g逐步成熟
                近年來,大數據底層技術發展呈現出逐步成熟的態勢。在大數據發展的初期,技術方案主要聚焦于解決數據“大”的問題,ApacheHadoop 定義了最基礎的分布式批處理架構,打破了傳統數據庫一體化的模式,將計算與存儲分離,聚焦于解決海量數據的低成本存儲與規?;幚?。Hadoop 憑借其友好的技術生態和擴展性優勢,一度對傳統大規模并行處理(massively parallel processor, MPP)數據庫的市場造成影響。但當前 MPP 在擴展性方面不斷突破(2019 年中國信通院大數據產品能力評測中MPP大規模測試集群規模已突破 512 節點),使得 MPP 在海量數據處理領域又重新獲得了一席之位。
                MapReduce 暴露的處理效率問題以及 Hadoop 體系龐大復雜的運維操作,推動計算框架不斷進行著升級演進。隨后出現的 ApacheSpark 已逐步成為計算框架的事實標準。在解決了數據“大”的問題后,數據分析時效性的需求愈發突出,Apache Flink、Kafka Streams、SparkStructured Streaming等近年來備受關注的產品為流處理的基礎框架打下了基礎。
                在此基礎上,大數據技術產品不斷分層細化,在開源社區形成了豐富的技術棧,覆蓋存儲、計算、分析、集成、管理、運維等各個方面。據統計,目前大數據相關開源項目已達上百個。
               ?。ㄈ┐髷祿a業規模平穩增長
                國際權威機構 Statista 在 2019 年 8 月發布的報告顯示,預計到2020 年,全球大數據市場的收入規模將達到 560 億美元,較 2018 年的預期水平增長約 33.33%,較 2016 年的市場收入規模翻一倍。隨著市場整體的日漸成熟和新興技術的不斷融合發展,未來大數據市場將呈現穩步發展的態勢,增速維持在 14%左右。在 2018-2020 年的預測期內,大數據市場整體的收入規模將保持每年約 70 億美元的增長,復合年均增長率約為1 5.33%。

              圖表:2016-2020 年全球大數據市場收入規模預測
                從細分市場來看,大數據硬件、軟件和服務的市場規模均保持較穩定的增長,預計到 2020 年,三大細分市場的收入規模將分別達到150 億美元(硬件)、200 億美元(軟件)、210 億美元(服務)。
                具體來看,2016-2017 年,軟件市場規模增速達到了 37.50%,在數值上超過了傳統的硬件市場。隨著機器學習、高級分析算法等技術的成熟與融合,更多的數據應用和場景正在落地,大數據軟件市場將繼續高速增長。預計在 2018-2020 年間,每年約有 30 億美元的增長規模,復合年均增長率約為 19.52%。大數據相關服務的規模始終最高,預計在 2018-2020 年間的復合年均增長率約為 14.56%。相比之下,硬件市場增速最低,但仍能保持約 11.80%的復合年均增長率。從整體占比來看,軟件規模占比將逐漸增加,服務相關收益將保持平穩發展的趨勢,軟件與服務之間的差距將不斷縮小,而硬件規模在整體的占比則逐漸減小。

              圖表:2016-2020 年全球大數據細分市場收入規模預測
               ?。ㄋ模┐髷祿髽I加速整合
                近兩年來,國際具有影響力的大數據公司也遭遇了一些變化。
                2018 年 10 月,美國大數據技術巨頭 Cloudera3和 Hortonworks4宣布合并。在 Hadoop 領域,兩家公司的合并意味著“強強聯手”,而在更加廣義的大數據領域,則更像是“抱團取暖”。但毫無疑問,這至少可以幫助兩家企業結束近十年的競爭,并且依靠壟斷地位早日擺脫長期虧損的窘狀。而從第三方的角度來看,這無疑會影響整個 Hadoop的生態。開源大數據目前已經成為互聯網企業的基礎設施,兩家公司合并,意味著 Hadoop 的標準將更加統一,長期來看新公司的盈利能力也將大幅提升,并將更多的資源用于新技術的投入。從體量和級別上來看,新公司將基本代表 Hadoop 社區,其他同類型企業將很難與之競爭。
                2019 年 8 月,惠普(HPE)收購著名大數據技術公司 MapR 的業務資產,包括 MapR 的技術、知識產權以及多個領域的業務資源等。
                MapR 創立于 2009 年,屬于 Hadoop 全球軟件發行版供應商之一。專家普遍認為,企業組織越來越多以云服務形式使用數據計算和分析產品是使得 MapR 需求減少的重要原因之一。用戶需求正從采購以Hadoop 為代表的平臺型產品,轉向結合云化、智能計算后的服務型產品。這也意味著,全球企業級 IT 廠商的戰爭已經進入到了一個新階段,即滿足用戶從平臺產品到云化服務,再到智能解決方案的整體需求。
               ?。ㄎ澹祿弦幰笕找鎳栏?/div>
                近兩年來,各國在數據合規性方面的重視程度越來越高,但數據合規的進程仍任重道遠。2019 年 5 月 25 日,旨在保護歐盟公民的個人數據、對企業的數據處理提出了嚴格要求的《通用數據保護條例》(GDPR)實施滿一周年,數據保護相關的案例與公開事件數量攀升,同時也引起了諸多爭議。
                牛津大學的一項研究發現,GDPR 實施滿一年后,未經用戶同意而設置的新聞網站上的 Cookies 數量下降了 22%5。歐盟 EDPB 的報告顯示,GDPR 實施一年以來,歐盟當局收到了約 145000 份數據安全相關的投訴和問題舉報;共判處 5500 萬歐元行政罰款。蘋果、微軟、Twitter、WhatsApp、Instagram 等企業也都遭到調查或處罰。
                GDPR 的正式實施之后,帶來了全球隱私保護立法的熱潮,并成功提升了社會各領域對于數據保護的重視。例如,2020 年 1 月起,美國加州的消費者隱私法案(CCPA)也將正式生效6。與 GDPR 類似,CCPA 將對所有和美國加州居民有業務的數據商業行為進行監管。
                CCPA 在適用監管的標準上比 GDPR 更寬松,但是一旦滿足被監管的標準,違法企業受到的懲罰更大。2019 年 8 月份,IAPP/OneTrust對部分美國企業進行了 CCPA 準備度調查,結果顯示,74%的受訪者認為他們的企業應該遵守 CCPA,但只有大約 2%的受訪者認為他們的企業已經完全做好了應對 CCPA 的準備。除加州 CCPA 外,更多的法案正在美國紐約州等多個州陸續生效。
              本文摘自中國信通院發布的《大數據白皮書(2019)》,如摘編或利用請注明出處。
              快三计划软件