10月26日，由北京四維縱橫數(shù)據(jù)技術(shù)有限公司自主研發(fā)的超融合數(shù)據(jù)庫YMatrix 5.0正式發(fā)布。

不同于傳統(tǒng)以及專用數(shù)據(jù)庫產(chǎn)品，YMatrix實(shí)現(xiàn)了“一庫多用”，可以支持各類傳統(tǒng)及新興數(shù)據(jù)場景，廣泛支持多種數(shù)據(jù)類型，包括關(guān)系、時(shí)序、GIS、JSON、文本、圖片數(shù)據(jù)等，也能滿足包括機(jī)器學(xué)習(xí)、高級查詢在內(nèi)的全場景數(shù)據(jù)管理和復(fù)雜分析需求。

YMatrix創(chuàng)始團(tuán)隊(duì)曾在全球排名Top3的Greenplum工作多年，是分析型數(shù)據(jù)庫領(lǐng)域少見的世界級完整建制團(tuán)隊(duì)。創(chuàng)始人姚延棟所帶領(lǐng)團(tuán)隊(duì)有大量服務(wù)全球500強(qiáng)企業(yè)的經(jīng)驗(yàn)，對企業(yè)級數(shù)據(jù)庫產(chǎn)品的需求、研發(fā)和應(yīng)用有深刻理解。

從第一行代碼到5.0版本，僅兩年時(shí)間，公司已獲得累計(jì)近2億元人民幣的4輪融資，股東包括晨山資本、順義產(chǎn)業(yè)基金、某頭部云廠商、東方富海、中科創(chuàng)星、清華啟迪等。

此次產(chǎn)品發(fā)布會(huì)上，YMatrix CEO 與創(chuàng)始人姚延棟分享了超融合數(shù)據(jù)庫的發(fā)展趨勢，以及萬物智聯(lián)場景下數(shù)據(jù)庫的最佳形態(tài)。另外，杭州自動(dòng)化技術(shù)研究院院長徐赤、小米智能制造軟件產(chǎn)品部負(fù)責(zé)人封楊博士、三一重工泵送研究院泵誦云平臺大數(shù)據(jù)負(fù)責(zé)人褚鳳天，也參與了此次發(fā)布會(huì)，分別從工廠數(shù)字化、智能制造和工業(yè)互聯(lián)網(wǎng)、智能設(shè)備運(yùn)維等不同應(yīng)用場景角度，分享了他們對下一代數(shù)據(jù)庫的需求和理解。

專用數(shù)據(jù)庫 vs. 超融合：下一代技術(shù)棧的競賽

下一個(gè)時(shí)代，是萬物智聯(lián)和數(shù)智化轉(zhuǎn)型的時(shí)代。那么，作為數(shù)字基石之一的數(shù)據(jù)庫應(yīng)該是什么樣的？

過去20年間，互聯(lián)網(wǎng)飛速發(fā)展，為了應(yīng)對不斷升級、升維的數(shù)據(jù)環(huán)境，涌現(xiàn)了很多優(yōu)秀的產(chǎn)品，或是功能強(qiáng)大，或是性能驚艷，或是易用性極佳。然而，用戶選擇時(shí)，功能、性能、易用性似乎構(gòu)成了一個(gè)”不可能三角”，總是需要權(quán)衡和取舍。

為了應(yīng)對新增的需求，用戶不得已的選擇是不斷疊加，先一個(gè)個(gè)疊加新的專用數(shù)據(jù)庫產(chǎn)品，再疊加運(yùn)維不同產(chǎn)品的專業(yè)化團(tuán)隊(duì)。最終造成的困境，杭州自動(dòng)化技術(shù)研究院院長徐赤將其總結(jié)為“難、混、亂、散”：

每出現(xiàn)一個(gè)新需求，就要疊加一個(gè)新產(chǎn)品，從選型、試點(diǎn)到驗(yàn)證，少則一兩個(gè)月，多則半年甚至一年，堪比“煉獄”。由于目標(biāo)混沌、路徑混亂、缺少核心系統(tǒng)，數(shù)據(jù)總是呈現(xiàn)散亂并難以整合的狀態(tài)。

最后導(dǎo)致的直接結(jié)果就是“用戶成本高“、”需求難以滿足、痛點(diǎn)永遠(yuǎn)存在”。

對此，徐赤在發(fā)布會(huì)上表示，在過去以專用類產(chǎn)品為主流的市場中，服務(wù)商忙著生產(chǎn)孤島、企業(yè)忙著購買孤島，工程師們忙著打通孤島，循環(huán)往復(fù)，永無止境。而且，這樣強(qiáng)行耦合的結(jié)構(gòu)，牽一發(fā)動(dòng)全身，非常不穩(wěn)定。

YMatrix創(chuàng)始人姚延棟介紹，作為數(shù)據(jù)庫人，成立團(tuán)隊(duì)的初心，就是想從用戶需求出發(fā)，做一款通用性強(qiáng)的產(chǎn)品，而不是和大多同行一樣，開發(fā)專用數(shù)據(jù)庫產(chǎn)品，繼續(xù)一個(gè)問題接一個(gè)問題，只解決當(dāng)下問題。

據(jù)了解，在國際市場上，類似YMatrix這樣具備 “超融合”特性的產(chǎn)品，已經(jīng)成為了近年的研發(fā)趨勢。

海外市場，Snowflake 和 Databricks 曾先后提出 “one data platform”理念；傳統(tǒng)數(shù)據(jù)庫頭把交椅的Oracle也在走向融合方向；對復(fù)雜新興場景需求更加熟悉的時(shí)序數(shù)據(jù)庫大佬 InfluxDB 和 TimescaleDB，也先后啟動(dòng)了新一代融合型數(shù)據(jù)庫的研發(fā)，對比大廠采取了更為激進(jìn)的策略。

國內(nèi)市場中，YMatrix率先提出超融合數(shù)據(jù)庫概念，在2020年完成了相應(yīng)產(chǎn)品的研發(fā)；目前也有少數(shù)創(chuàng)業(yè)公司試水，從專用產(chǎn)品出發(fā)，研發(fā)符合新一代融合理念的產(chǎn)品。

如何定義一款優(yōu)秀的“超融合”數(shù)據(jù)庫產(chǎn)品？

首先，回到用戶需求。

小米智能制造軟件產(chǎn)品部負(fù)責(zé)人封楊博士是這么定義的：以工業(yè)互聯(lián)網(wǎng)場景為例，其本質(zhì)是以“數(shù)據(jù)”為核心要素，企業(yè)實(shí)現(xiàn)全面連接。企業(yè)經(jīng)營者的核心訴求，是如何最大化利用數(shù)據(jù)智能，為企業(yè)經(jīng)營帶來看得見的價(jià)值。

再向上一層，則是跨過每個(gè)企業(yè)的微觀需求，在垂直產(chǎn)業(yè)或多個(gè)產(chǎn)業(yè)交叉的維度，構(gòu)建起全要素、全產(chǎn)業(yè)鏈、全價(jià)值鏈融合的新制造體系和新產(chǎn)業(yè)生態(tài)。

為了實(shí)現(xiàn)這個(gè)目標(biāo)，需要搭建一個(gè)閉環(huán)的數(shù)據(jù)鏈條。在企業(yè)內(nèi)到企業(yè)外，從采集、診斷、預(yù)測到智能決策，實(shí)現(xiàn)全環(huán)節(jié)覆蓋。依賴優(yōu)化后的結(jié)果，可以更及時(shí)、更準(zhǔn)確的做商業(yè)決策，比如確定一個(gè)月后生產(chǎn)什么，需要提前備好多少原材料，技術(shù)工藝能怎么調(diào)優(yōu)，等等。

封楊博士介紹，從企業(yè)級用戶的角度來看，代表最先進(jìn)生產(chǎn)力的產(chǎn)品，首先應(yīng)該是極致簡單的，最好是一個(gè)頂N個(gè)，能降低企業(yè)的財(cái)務(wù)、人力、學(xué)習(xí)成本；其次，要好用易用，因?yàn)橹圃靾鼍安杉臄?shù)據(jù)類型五花八門，不同數(shù)據(jù)類型的交叉分析、應(yīng)對業(yè)務(wù)訴求的復(fù)雜分析也是層出不窮。

對此，姚延棟進(jìn)一步解釋，“用戶并不關(guān)心什么TP、AP、湖倉、批流，他們想要的就是一個(gè)強(qiáng)大的數(shù)據(jù)庫，能接入所有數(shù)據(jù)，做得了各種各樣的分析。有數(shù)據(jù)就可以往里寫，想用的時(shí)候隨時(shí)用，允許他們把精力放在數(shù)據(jù)價(jià)值上，而不是數(shù)據(jù)庫上。所以，行業(yè)內(nèi)曾熱烈討論的湖倉之分、批流之分，只會(huì)是階段性產(chǎn)物”。

“使用YMatrix，用戶只需要做一次選型，運(yùn)維一個(gè)產(chǎn)品，就可以支持所有數(shù)據(jù)類型，滿足所有可能的需求。每次新需求出現(xiàn)時(shí)，只需要考慮在YMatrix中怎么實(shí)現(xiàn)。這大大降低了選型成本和開發(fā)運(yùn)維成本”，姚延棟介紹。

“企業(yè)內(nèi)很難有精通不同產(chǎn)品的通才，所以廠商應(yīng)該把復(fù)雜度處理掉，把簡單應(yīng)用給到我們用戶，這樣既省錢，又省心省力”，封楊博士表示在應(yīng)用YMatrix的超融合產(chǎn)品后，相當(dāng)于實(shí)現(xiàn)了“無縫集成”，僅僅需要管理“1個(gè)極致輕松的數(shù)倉建設(shè)團(tuán)隊(duì)+1個(gè)極致專注的工業(yè)算法團(tuán)隊(duì)”。

三一重工泵送研究院泵誦云平臺大數(shù)據(jù)負(fù)責(zé)人褚鳳天表示，“使用高效的產(chǎn)品，可以大量釋放出精力和創(chuàng)造力，讓團(tuán)隊(duì)聚焦工廠運(yùn)營、設(shè)備管理、工藝調(diào)優(yōu)等更有價(jià)值的工作”。

“以常見的堵管故障為例，以前總是很難明確堵管的真實(shí)原因，現(xiàn)在可以在庫內(nèi)通過批量的算法，在采集到的工礦數(shù)據(jù)上，更好的定位原因，提升服務(wù)水平，降低客戶投訴率”，褚鳳天介紹，“在嘗試從制造企業(yè)向服務(wù)型企業(yè)升級的過程中，數(shù)據(jù)能力會(huì)是重點(diǎn)之一，直接決定了服務(wù)水平和盈利水平” 。

性能突破，是超融合價(jià)值放大的必要前提

在數(shù)據(jù)庫行業(yè)，性能似乎是一個(gè)永遠(yuǎn)有吸引力的話題。

性能數(shù)據(jù)直觀，誰高誰低，誰強(qiáng)誰弱，一目了然。最近，很多數(shù)據(jù)庫廠商都開始性能打榜打擂。姚延棟對此表示，“這是好事，說明技術(shù)在進(jìn)步。但是，僅僅在某個(gè)場景下實(shí)現(xiàn)性能快20%-30%，甚至1倍，是很難贏得客戶的。客戶需要的是鐵人三項(xiàng)，甚至是十項(xiàng)全能” 。

“在YMatrix團(tuán)隊(duì)內(nèi)部，我們關(guān)注全場景性能表現(xiàn)，包括寫入能力、時(shí)序查詢能力、單表OLAP分析、多表關(guān)聯(lián)OLAP分析、Machine Learning性能以及 OLTP 能力等諸多方面”，姚延棟介紹，“性能加持下的超融合，才是真正的超融合，才能給用戶提供價(jià)值” 。

目前，YMatrix在生產(chǎn)場景下的寫入速度實(shí)現(xiàn)了1.52 億數(shù)據(jù)點(diǎn)/秒。通常一個(gè)工廠的數(shù)據(jù)點(diǎn)大概在10萬點(diǎn)以內(nèi)，1.52億是該場景規(guī)模的1500倍，哪怕是對寫入能力要求最高的時(shí)序場景，也可以輕松滿足其高并發(fā)、低延遲的寫入需求。

此外，對比時(shí)序數(shù)據(jù)庫獨(dú)角獸TimescaleDB，查詢耗時(shí)是YMatrix的5.1倍；對比知名OLAP數(shù)據(jù)庫產(chǎn)品Clickhouse，YMatrix在SSB基礎(chǔ)測試上快27%；對比MPP數(shù)據(jù)庫主流廠商Greenplum，YMatrix在多表關(guān)聯(lián)分析場景上實(shí)現(xiàn)了數(shù)倍的性能提升；對比全球流行的開源大數(shù)據(jù)平臺Spark，YMatrix在機(jī)器學(xué)習(xí)場景上的性能是其8倍；在Intel實(shí)驗(yàn)室的TPC-B 國際標(biāo)準(zhǔn)測試中，YMatrix主鍵查詢tps高達(dá)160萬，數(shù)十倍于絕大多數(shù)產(chǎn)品。

對于性能優(yōu)化的重要性，三一重工褚鳳天表示，“最直接的體現(xiàn)就是提高運(yùn)行速度，我們可以更快速的反應(yīng)，大大提高了運(yùn)維團(tuán)隊(duì)的效率”。

姚延棟介紹，此次發(fā)布的YMatrix 5.0版本，還包含了多至138項(xiàng)的性能優(yōu)化，特別是針對寫入和分析等重點(diǎn)領(lǐng)域，進(jìn)行了深度的指令級優(yōu)化。

在易用性方面，YMatrix設(shè)計(jì)了用戶體驗(yàn)極佳的圖形化installer，只需10分鐘左右就可以完成數(shù)據(jù)庫集群的搭建。同時(shí)，為了降低初學(xué)者的學(xué)習(xí)曲線，YMatrix提供了on boarding功能，用戶可以在3分鐘內(nèi)體驗(yàn)一個(gè)完整的IoT場景，包括數(shù)據(jù)寫入和查詢分析。

目前，YMatrix已經(jīng)獲得了從創(chuàng)業(yè)公司到大型企業(yè)的認(rèn)可，其中有超過萬億市值的行業(yè)龍頭企業(yè)，包括寧德時(shí)代、比亞迪等，以及世界500強(qiáng)企業(yè)，包括小米、三一重工等。

“后續(xù)，YMatrix會(huì)在已經(jīng)存在海量需求的時(shí)序場景深耕，嘗試替代傳統(tǒng)數(shù)據(jù)庫和專用類產(chǎn)品”，創(chuàng)始人姚延棟介紹，“數(shù)據(jù)量大、指標(biāo)量多的車聯(lián)網(wǎng)、智能制造、智慧能源、智慧城市、智慧園區(qū)、智慧醫(yī)療等場景會(huì)是重要方向。這些場景所產(chǎn)生的業(yè)務(wù)需求，將最大化體現(xiàn)超融合產(chǎn)品的價(jià)值”。