齊旭

隨著全球各大科技巨頭的競相加人，開源軟件技術(shù)已經(jīng)活躍在各個信息技術(shù)領(lǐng)域當(dāng)中。其中，大數(shù)據(jù)生態(tài)成為開源技術(shù)的直接受益者。開源技術(shù)適用于龐雜的數(shù)據(jù)管理系統(tǒng)，帶來敏捷、高效、可擴展以殛可自控的管理能力。并幫助企業(yè)降低IT建設(shè)曩維護(hù)成本。2018年雙11當(dāng)天。阿里云原生數(shù)據(jù)庫PolarDB輕松應(yīng)對了0點0分0秒瞬時提升122倍的數(shù)據(jù)洪峰。Netflix也采用自研開源架構(gòu)Metacat將海量數(shù)據(jù)集合成一個“單一”的數(shù)據(jù)倉庫，大幅提升管理能效。

當(dāng)前，我國有越來越多的企業(yè)、人才加入到開源社區(qū)。貢獻(xiàn)力也。后來居上，共同推進(jìn)開瀛項目、開源生態(tài)的繁榮和可持續(xù)發(fā)展。

大數(shù)據(jù)生態(tài)成為開源技術(shù)重大“受益者”

不斷增長的數(shù)據(jù)量、快速處理數(shù)據(jù)的需求以及數(shù)據(jù)類型、結(jié)構(gòu)、來源的多樣性給數(shù)據(jù)庫管理帶來新挑戰(zhàn)。

近年來，在互聯(lián)網(wǎng)服務(wù)、多媒體以及科學(xué)研究等多個領(lǐng)域，都可見到大數(shù)據(jù)的身影。在大數(shù)據(jù)時代，不斷增長的數(shù)據(jù)量、快速處理數(shù)據(jù)的需求以及數(shù)據(jù)類型、結(jié)構(gòu)和來源的多樣性給數(shù)據(jù)庫敏捷、高效、可擴展性以及個性化管理帶來了全新挑戰(zhàn)。

開源技術(shù)賦能了大數(shù)據(jù)生態(tài)的高質(zhì)量發(fā)展。賽迪智庫信息化和軟件服務(wù)業(yè)所博士蒲松濤表示，經(jīng)過了數(shù)十年的發(fā)展，開源軟件和開源工具已經(jīng)應(yīng)用到了大數(shù)據(jù)產(chǎn)業(yè)發(fā)展的各個環(huán)節(jié)，基于開源軟件，企業(yè)可以快速構(gòu)建大數(shù)據(jù)應(yīng)用平臺，提供豐富的大數(shù)據(jù)開發(fā)和應(yīng)用工具。

當(dāng)前，幾乎各種規(guī)模的企業(yè)都在使用開源軟件和工具做大數(shù)據(jù)處理和基于數(shù)據(jù)的預(yù)測分析。開源界也涌現(xiàn)出了Fhdoop、OpenStack、OpenShift、Mapre-duce、docker等引領(lǐng)行業(yè)技術(shù)創(chuàng)新方向的重量級開源項目。

華泰人壽基于openShift架構(gòu)打造易于管理的新IT系統(tǒng)，以提升企業(yè)競爭力，實現(xiàn)業(yè)務(wù)數(shù)字化轉(zhuǎn)型。在基礎(chǔ)設(shè)施上，引入紅帽openShift容器云解決方案和紅帽ceph分布式存儲。通過將保險業(yè)務(wù)上docker云，實現(xiàn)華泰人壽業(yè)務(wù)的彈性伸縮和快速上線，加速其互聯(lián)網(wǎng)保險項目快速落地。

美國知名在線影片租賃提供商Nemix也采用了大數(shù)據(jù)發(fā)現(xiàn)服務(wù)的開源框架Metacat。由于Netflix的數(shù)據(jù)倉庫由許多大型的數(shù)據(jù)集組成，為了確保數(shù)據(jù)平臺能夠橫跨這些數(shù)據(jù)集成為一個“單一”的數(shù)據(jù)倉庫，Netflix開發(fā)的元數(shù)據(jù)服務(wù)Metacat，能讓數(shù)據(jù)的發(fā)生、發(fā)現(xiàn)、處理和管理變得更加快捷高效、處理精度大幅提升;同時還可兼容spark、pres-to、Pig和Hive架構(gòu)。Netflix軟件架梅師Ajoy Majmdar指出，開放開源是身為技術(shù)公司的競爭戰(zhàn)略，既能夠?qū)⒆约旱慕鉀Q方案建立為行業(yè)標(biāo)準(zhǔn)和最佳實踐，又能建立Netflix的技術(shù)品牌，還能從共享生態(tài)中獲得反饋輸入井受益。

事實上，推動大數(shù)據(jù)應(yīng)用高質(zhì)量發(fā)展的主流開源平臺還有很多，例如Spark、Shark、Bagel等。蒲松濤表示，這些開源平臺大幅降低應(yīng)用門檻，有效幫助企業(yè)實現(xiàn)工業(yè)級應(yīng)用，進(jìn)而帶動各行業(yè)大規(guī)模部署。此外，大數(shù)據(jù)還涌現(xiàn)出了一批開源支線平臺。其中，Storm完全擺脫了經(jīng)典的MapR，educe架構(gòu)，重新設(shè)計了一個適用于流式計算的架構(gòu)，以數(shù)據(jù)流為驅(qū)動觸發(fā)計算，計算時效性高，適應(yīng)有向無環(huán)圖計算拓?fù)涞脑O(shè)計，計算方式較為靈活，在業(yè)界得到了一定的部署應(yīng)用。

開源社區(qū)供需“雙贏”中國力量已崛起

開源軟件的“共享和貢獻(xiàn)”機制吸引了眾多開發(fā)者參與，給了每一位開發(fā)者“顛覆游戲規(guī)則”的權(quán)利。

開源成為一種加速技術(shù)研發(fā)速度、節(jié)約成本、效益最大化以及推動技術(shù)創(chuàng)新和產(chǎn)業(yè)發(fā)展的有效路徑。阿里云智能數(shù)據(jù)庫事業(yè)部負(fù)責(zé)人、達(dá)摩院數(shù)據(jù)庫首席科學(xué)家李飛飛在接受《中國電子報》記者專訪時表示，不同于傳統(tǒng)的閉源商業(yè)軟件，開源軟件的創(chuàng)新不局限于一個企業(yè)或某一些團(tuán)隊，而是無國界的，是群智開發(fā)的典型實踐。

開源社區(qū)的建立為推動開源軟件發(fā)展、構(gòu)建行業(yè)競爭優(yōu)勢做出突出貢獻(xiàn)，隊伍的壯大需要每一位使用者持續(xù)不斷的貢獻(xiàn)智慧，以實現(xiàn)真正的“共贏”。開源的發(fā)展歷程中，極客、大公司、商業(yè)顛覆者輪番登場，開源技術(shù)的訴求也從商業(yè)驅(qū)動向生態(tài)驅(qū)動發(fā)展。中國工程院院士廖湘科指出，開源是軟件創(chuàng)新技術(shù)的主要來源，是生態(tài)抓手，而非贏利的切入點。

開源軟件的“共享和貢獻(xiàn)”機制吸引了眾多開發(fā)者的參與，給了每一位開發(fā)者“顛覆游戲規(guī)則”的權(quán)利。有了這種生態(tài)的加持，信息技術(shù)將被快速推進(jìn)，各個參與者將持續(xù)獲利。對此，李飛飛表示，開源生態(tài)的受益者是開源技術(shù)的需求側(cè)和供給側(cè)雙方。從供給側(cè)角度來看，參與的人越多，思維碰撞而引發(fā)的迭代演進(jìn)就會越快;從需求側(cè)角度來看，各個企業(yè)不僅可以免除被閉源系統(tǒng)“技術(shù)綁定”，還可以在開源社區(qū)實現(xiàn)數(shù)據(jù)庫技術(shù)遷移，企業(yè)還可針對企業(yè)技術(shù)特征進(jìn)行數(shù)據(jù)庫的個性定制化，實現(xiàn)大量的應(yīng)用和代碼的改造且系統(tǒng)間互相兼容。

中國開源軟件推進(jìn)聯(lián)盟副主席蒹秘書長劉澎在PostgreSQL CN 2019上表示，當(dāng)前國內(nèi)越來越多的企業(yè)為開源做出重要貢獻(xiàn)，我國的開源實力已經(jīng)崛起。以華為、阿里等為代表的開源軟件開發(fā)者已經(jīng)逐漸與亞馬遜、微軟站到了同一高度，實現(xiàn)了從“使用者”到“引領(lǐng)者”的身份轉(zhuǎn)變。

目前，中國企業(yè)在Lmux基金會中有1個白金會員（華為），1個金牌會員（阿里云）和數(shù)十家銀牌會員（包括騰訊、中國移動、聯(lián)想等）。華為在多個開源社區(qū)貢獻(xiàn)排名前列。中國工程院院士倪光南認(rèn)為，華為是開源軟件的優(yōu)秀開發(fā)代表，通過引進(jìn)、消化，實現(xiàn)創(chuàng)新發(fā)展，進(jìn)而貢獻(xiàn)給整個開源社區(qū)。

阿里云也成為游戲規(guī)則的重要改變者和全球云數(shù)據(jù)庫領(lǐng)跑者之一。2018年，阿里云數(shù)據(jù)庫成功進(jìn)入Gartner數(shù)據(jù)庫魔力象限，這是該榜單首次出現(xiàn)中國公司。近日，Garmer發(fā)布的全球云數(shù)據(jù)庫市場份額榜單中，阿里云位居第三，超越了Oracle、IBM和谷歌。5月21日，阿里云提供傳統(tǒng)數(shù)據(jù)庫一鍵遷移上云能力，可以幫助企業(yè)將線下的MySQL、PostgreSQL和Oracle等數(shù)據(jù)庫輕松上云，最快數(shù)小時內(nèi)遷移完成。李飛飛表示，阿里云自研的PolarDB云原生數(shù)據(jù)庫的分布式存儲架構(gòu)具有一寫多度、計算與存儲分離等優(yōu)勢，幫助淘寶交易平臺應(yīng)對了雙11當(dāng)天瞬時提升122倍的數(shù)據(jù)淇峰。

此外，國內(nèi)還有包括百度、浪潮、瀚高等在內(nèi)的眾多企業(yè)積極參與并貢獻(xiàn)到開源社區(qū)當(dāng)中。人工智能、自動駕駛等新興信息技術(shù)也成為開源項目的重要應(yīng)用領(lǐng)域。