摘要:星環(huán)科技自成立以來,一直致力于國產(chǎn)化數(shù)據(jù)庫的自主研發(fā),打造了自主可控的高性能分布式分析型數(shù)據(jù)庫ArgoDB和分布式交易型數(shù)據(jù)庫KunDB。
星環(huán)科技自成立以來,一直致力于國產(chǎn)化數(shù)據(jù)庫的自主研發(fā),打造了自主可控的高性能分布式分析型數(shù)據(jù)庫ArgoDB和分布式交易型數(shù)據(jù)庫KunDB。交易型數(shù)據(jù)庫KunDB具備較強的SQL兼容性,同時具備高可用、高并發(fā)、在線擴縮容、數(shù)據(jù)強一致性等能力,適用于操作型業(yè)務(wù)、高并發(fā)業(yè)務(wù)等場景。多模型數(shù)據(jù)庫ArgoDB具備完整的SQL兼容性,同時具備高擴展、高可靠、多模型、存算解耦等能力,一站式滿足數(shù)據(jù)倉庫、實時數(shù)據(jù)倉庫、數(shù)據(jù)集市、OLAP、聯(lián)邦計算等場景。
通過不斷的打磨和對業(yè)務(wù)場景不斷的落地實踐,ArgoDB和KunDB已成為具有完全自主知識產(chǎn)權(quán)的成熟的國產(chǎn)數(shù)據(jù)庫,能夠為更多的客戶提供高性能、高可靠、成熟的數(shù)據(jù)庫產(chǎn)品服務(wù),幫助用戶應(yīng)對智能數(shù)據(jù)時代海量數(shù)據(jù)的分析與探索。
近日,星環(huán)科技正式發(fā)布了ArgoDB5.0和KunDB3.0,并將其結(jié)合打造了一體化實時AETP技術(shù)(分析增強型交易庫),在一個數(shù)據(jù)庫系統(tǒng)里同時支撐交易與分析混合型業(yè)務(wù)場景,助力數(shù)據(jù)庫國產(chǎn)化升級。
ArgoDB5.0:存算引擎雙升級,打造高性能湖倉集一體化多模型數(shù)據(jù)庫
Transwarp ArgoDB 是星環(huán)科技自主研發(fā)的面向數(shù)據(jù)分析型業(yè)務(wù)場景的國產(chǎn)化分布式多模數(shù)據(jù)庫,能夠一站式替代Hadoop+MPP混合架構(gòu),提供多模分析、實時數(shù)據(jù)處理、存算解耦、混合負載、數(shù)據(jù)聯(lián)邦、異構(gòu)服務(wù)器混合部署等先進技術(shù)能力,一站式滿足數(shù)據(jù)倉庫、實時數(shù)據(jù)倉庫、數(shù)據(jù)集市、OLAP、聯(lián)邦計算等各種需求。2019年8月,ArgoDB成為全球第四個通過TPC-DS基準測試并經(jīng)過TPC官方審計的數(shù)據(jù)庫產(chǎn)品。
ArgoDB5.0打造了新一代向量化計算引擎和多模型存儲引擎,整體分析性能大幅度提升。ArgoDB5.0進一步加強了多模型數(shù)據(jù)的支持能力和處理能力,通過一個數(shù)據(jù)庫就可以滿足更多數(shù)據(jù)模型處理和不同模態(tài)數(shù)據(jù)關(guān)聯(lián)。同時,ArgoDB5.0引入DP-SQL能力,實現(xiàn)對數(shù)據(jù)的隱私保護,滿足數(shù)據(jù)發(fā)布、流通、脫敏、查詢、交易等場景下的數(shù)據(jù)安全要求。在數(shù)據(jù)資產(chǎn)安全保障上,5.0版本繼續(xù)加強了數(shù)據(jù)容災(zāi)備份能力,通過細粒度、高并發(fā)、高效率的容災(zāi)備份能力
,進一步提升數(shù)據(jù)安全保障能力。此外,ArgoDB 5.0進一步加強數(shù)據(jù)湖和數(shù)據(jù)倉庫/數(shù)據(jù)集市等業(yè)務(wù)面的技術(shù)革新,增強湖倉集融合能力,通過統(tǒng)一訪問接口、統(tǒng)一存儲、統(tǒng)一元數(shù)據(jù)管理等能力,真正意義上為用戶提供湖倉集一體化的場景解決方案。
新一代向量化計算引擎和多模存儲引擎,分析性能是同類數(shù)據(jù)庫產(chǎn)品的2~10倍
ArgoDB 5.0在原高效的計算引擎之上,將計算算子全向量化native改寫,使得高并發(fā)復(fù)雜分析在百毫秒內(nèi)反饋結(jié)果,將優(yōu)化器中引入數(shù)據(jù)的動態(tài)采樣,全面支持多種join的重寫。同時結(jié)合業(yè)務(wù)場景,優(yōu)化場景化能力,重點在湖倉一體的SQL管理上進行了優(yōu)化,并且新增隱私計算能力和數(shù)據(jù)動態(tài)脫敏能力,增強數(shù)據(jù)聯(lián)邦場景中SQL語句算子下推能力等。
在存儲引擎方面,ArgoDB 5.0繼續(xù)深耕分布式存儲框架與列式存儲引擎的優(yōu)化,在降低業(yè)務(wù)資源消耗的同時提升多模型能力和業(yè)務(wù)性能。相對于上一代批量掃描性能提升了10倍以上,同時降低業(yè)務(wù)SQL資源(IO等)的使用,提升系統(tǒng)穩(wěn)定性和業(yè)務(wù)效率。對于實時數(shù)倉場景,數(shù)據(jù)延遲控制在毫秒級,并且支持高并發(fā)分析。在大集群場景下,支持百萬級別的表和百萬級別的元信息管理,穩(wěn)定性進一步提升。
基于存算雙引擎的升級,ArgoDB 5.0在性能上有大幅度的提升,尤其是OLAP分析場景下的性能提升,無論是單表查詢還是多表關(guān)聯(lián)場景,ArgoDB都具備有明顯的性能優(yōu)勢,整體上是同類數(shù)據(jù)庫產(chǎn)品的2-10倍,幫助用戶更快、更穩(wěn)定地應(yīng)對復(fù)雜多變的業(yè)務(wù)需求。
多模數(shù)據(jù)融合分析,更高效地滿足”一庫多用“場景
隨著業(yè)務(wù)數(shù)據(jù)量不斷增長的同時,數(shù)據(jù)結(jié)構(gòu)也變得越來越靈活多樣,數(shù)據(jù)不再局限于規(guī)整的結(jié)構(gòu)化數(shù)據(jù),半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)在數(shù)據(jù)域處理中的占比逐年上升,因此對不同模態(tài)的數(shù)據(jù)進行智能化數(shù)據(jù)處理的需求越來越迫切。
多模型數(shù)據(jù)庫ArgoDB繼3.2版本新增支持大對象數(shù)據(jù)類型Blob和Clob,用來存儲、查詢和處理圖片、電子文檔、音頻、視頻等非結(jié)構(gòu)化數(shù)據(jù)后,ArgoDB 5.0新增對半結(jié)構(gòu)化的JSON/JSONB/XML數(shù)據(jù)類型的支持,滿足了更多數(shù)據(jù)模型處理場景和更多復(fù)雜業(yè)務(wù)需求。
同時,ArgoDB 5.0進一步加強了對多模態(tài)數(shù)據(jù)的處理能力,在優(yōu)化器上進一步深耕,對不同模態(tài)數(shù)據(jù)基于代價/規(guī)則等自動判斷選擇合理高效模型,拆分、分發(fā)計算任務(wù),讓數(shù)據(jù)處理更加快捷和高效。
在架構(gòu)上,ArgoDB基于存算解耦,實現(xiàn)了多模數(shù)據(jù)庫的“四個統(tǒng)一”:
? 統(tǒng)一的SQL編譯引擎,支持SQL 99/2003 標準語法,兼容TD,Oracle,DB2等多種方言,對不同模式的數(shù)據(jù)提供統(tǒng)一接口,將多個操作訪問入口變?yōu)橐粋€入口,將多種數(shù)據(jù)庫語言變?yōu)橐环N語言,降低開發(fā)和遷移成本,簡化用戶操作。
? 統(tǒng)一的計算引擎,將多套計算引擎變?yōu)橐惶滓妫瑢⒍喾萦嬎阗Y源變?yōu)橐环葙Y源,提供高性能的分析計算和執(zhí)行效率,滿足跨模型數(shù)據(jù)復(fù)雜關(guān)聯(lián)分析場景。
? 統(tǒng)一的存儲管理系統(tǒng),同時支持分析型行列混合存儲、支持具有搜索功能的文本存儲等多模異構(gòu)存儲,并保證數(shù)據(jù)的強一致性,數(shù)據(jù)只需一次入庫,即可通過異構(gòu)存儲的訪問能力支撐多樣化復(fù)雜分析場景,降低運維成本,將分散存儲管理變?yōu)榻y(tǒng)一存儲管理,極大簡化系統(tǒng)架構(gòu),減少開發(fā)運維成本。
? 統(tǒng)一的星環(huán)云原生操作系統(tǒng),支持 ARM+X86的混合架構(gòu),用戶可以利舊硬件,大幅降低成本。
ArgoDB5.0通過統(tǒng)一的元數(shù)據(jù)管理、統(tǒng)一的事務(wù)管理和完備的多模優(yōu)化器支撐了對不同模態(tài)數(shù)據(jù)的統(tǒng)一讀取調(diào)度,實現(xiàn)多模態(tài)融合,滿足更多“一庫多用“場景。
創(chuàng)新型數(shù)據(jù)差分隱私,強化數(shù)據(jù)安全
數(shù)據(jù)處理與數(shù)據(jù)安全是不可分割的,如何對個人數(shù)據(jù)的有效保護是在數(shù)據(jù)處理、數(shù)據(jù)公開、數(shù)據(jù)發(fā)布中不可繞開的一個話題。隱私保護是基于差分隱私的密碼學(xué)方法,在統(tǒng)計數(shù)據(jù)庫查詢時,旨在保證數(shù)據(jù)查詢的同時,最大程度減少識別個體數(shù)據(jù)的機會。
ArgoDB 5.0版本結(jié)合數(shù)據(jù)隱私安全的業(yè)務(wù)訴求,引入DP-SQL能力,實現(xiàn)對數(shù)據(jù)的隱私保護,滿足數(shù)據(jù)發(fā)布、流通、脫敏、查詢、交易等場景下的數(shù)據(jù)安全要求。在交互式場景下,數(shù)據(jù)管理者可以按需對查詢請求數(shù)據(jù)集合添加必要的干擾(即:噪聲)后反饋給用戶;在非交互式場景下,數(shù)據(jù)管理者可以按需針對所有可能的查詢,在滿足一定條件下一次性發(fā)布相關(guān)查詢數(shù)據(jù)(即添加噪聲后的“凈化版”數(shù)據(jù))。
ArgoDB5.0將隱私計算與數(shù)據(jù)庫技術(shù)相結(jié)合,支持復(fù)雜分析SQL自動優(yōu)化,易于開發(fā)人員使用。同時將加密協(xié)議結(jié)合SQL優(yōu)化技術(shù),相較于python級別實現(xiàn)執(zhí)行效率更優(yōu),支持更大數(shù)據(jù)量的隱私計算。
打破數(shù)據(jù)壁壘,增強湖倉集融合
隨著數(shù)據(jù)與業(yè)務(wù)的并行發(fā)展,對數(shù)據(jù)的融合分析處理逐漸成為數(shù)據(jù)庫技術(shù)發(fā)展趨勢。當數(shù)據(jù)倉庫與數(shù)據(jù)湖數(shù)據(jù)集市協(xié)同處理時,帶來的是數(shù)據(jù)孤島的打破,以及數(shù)據(jù)計算邊界的拓寬。
ArgoDB 5.0版本進一步加強數(shù)據(jù)湖和數(shù)據(jù)倉庫/數(shù)據(jù)集市等業(yè)務(wù)面的技術(shù)革新。在同一平臺中,避免數(shù)據(jù)移動,將原始的、加工清洗的、模型化的數(shù)據(jù),共同存儲于一體化的“湖倉集”中,既能面向業(yè)務(wù)實現(xiàn)高并發(fā)、精準化、高性能的歷史數(shù)據(jù)、實時數(shù)據(jù)的查詢服務(wù),又能承載分析報表、批處理、數(shù)據(jù)挖掘等分析型數(shù)據(jù)集市業(yè)務(wù),真正意義上為用戶提供湖倉集一體化的場景解決方案。
通過ArgoDB打造的湖倉集一體化方案,用戶可以基于統(tǒng)一訪問接口最大程度上降低數(shù)據(jù)湖、數(shù)據(jù)倉庫、數(shù)據(jù)集市業(yè)務(wù)過程中業(yè)務(wù)接口的調(diào)整,降低用戶開發(fā)成本,提高數(shù)據(jù)處理效率。統(tǒng)一的元數(shù)據(jù)管理可以在精準的ACL控制下,實現(xiàn)按需展示湖倉集內(nèi)的相關(guān)元數(shù)據(jù)的統(tǒng)一查詢,提高數(shù)據(jù)管理效率。統(tǒng)一存儲管理,對使用者屏蔽不同數(shù)據(jù)源的數(shù)據(jù)存儲,降低業(yè)務(wù)數(shù)據(jù)管理難度。此外,基于ArgoDB打造的湖倉集一體化方案可以無縫銜接AI技術(shù),幫助業(yè)務(wù)挖掘更多數(shù)據(jù)價值。
KunDB3.0:高度兼容Oracle語法和PL/SQL, 實現(xiàn)OLTP數(shù)據(jù)庫國產(chǎn)化升級
Transwarp KunDB是星環(huán)科技基于分布式技術(shù)自主研發(fā)的國產(chǎn)化的交易型數(shù)據(jù)庫,提供完整的關(guān)系型數(shù)據(jù)庫的能力,高度兼容SQL,保證事務(wù)ACID。KunDB具有業(yè)內(nèi)領(lǐng)先的事務(wù)處理性能,SQL兼容性以及最新的分布式查詢優(yōu)化技術(shù),支持復(fù)雜查詢且性能是MySQL的10倍以上,充分滿足高并發(fā)、大數(shù)據(jù)量的交易型業(yè)務(wù)場景,能夠?qū)崿F(xiàn)MySQL,Oracle等傳統(tǒng)主流數(shù)據(jù)庫的國產(chǎn)化替代。獨特的混合部署技術(shù)支持主流國產(chǎn)化CPU等自主可控的硬件平臺和OS部署,滿足國產(chǎn)化部署需求。此外,KunDB提供全鏈路高可用、一致性備份恢復(fù)等容災(zāi)能力,以及完備的安全管理、資源管理能力,可以為不同業(yè)務(wù)場景保駕護航。
KunDB3.0高度兼容Oracle對象與語法,基于創(chuàng)新的過程語言編譯技術(shù),完整支持Oracle PL/SQL語法,大大降低企業(yè)國產(chǎn)化遷移成本。通過豐富查詢優(yōu)化規(guī)則和算子進一步增強查詢優(yōu)化器,并結(jié)合全新的向量化執(zhí)行引擎使得分析性能在TPCH基準測試中較MySQL最高優(yōu)化80倍。在事務(wù)處理能力方面,相較于KunDB2.0采用的全局事務(wù)管理器GTM方案,KunDB3.0采用基于TSO的全新分布式強一致事務(wù)處理框架,進一步提升分布式事務(wù)處理能力,事務(wù)處理上限達300萬TPS,較GTM方案提升5倍以上。同時KunDB3.0也對存儲層性能和分布式架構(gòu)做了持續(xù)優(yōu)化,單機TPCC提升了1倍,分布式TPCC提升了60%。在容災(zāi)能力方面,KunDB3.0優(yōu)化了跨機房容災(zāi)架構(gòu),支持全鏈路高可用、一致性備份恢復(fù)等能力,故障時可恢復(fù)過去任意時間點,充分保障數(shù)據(jù)安全。此外,KunDB3.0采用了基于分析引擎增強分布式事務(wù)處理引擎技術(shù)(ATEP),大幅提高了KunDB的數(shù)據(jù)分析能力,通過一個系統(tǒng)就可以同時提供高性能AP和TP服務(wù)能力,滿足交易與分析混合型業(yè)務(wù)場景。
高度兼容Oracle對象與語法,完整支持Oracle PL/SQL
KunDB3.0 對Oracle語法各個方面高度兼容,成為業(yè)內(nèi)領(lǐng)先的具備支撐Oracle業(yè)務(wù)遷移能力的國產(chǎn)數(shù)據(jù)庫。KunDB3.0高度兼容Oracle語法與PL/SQL,支持VARCHAR2、NVARCHAR2等全部類型,在PL/SQL語法上,支持控制語句、集合、動態(tài)SQL、子程序、預(yù)定義包、錯誤處理等全部PL/SQL語法,解決了Oracle業(yè)務(wù)遷移到國產(chǎn)化數(shù)據(jù)庫的核心痛點,為其它兼容性完善提供了基礎(chǔ)。在Oracle數(shù)據(jù)庫對象、DML、函數(shù)、系統(tǒng)視圖、內(nèi)置包、驅(qū)動等方面,做到了常用功能的兼容,滿足大部分業(yè)務(wù)的遷移需求,極大降低了企業(yè)業(yè)務(wù)遷移成本。
KunDB3.0采用創(chuàng)新的過程語言編譯技術(shù)及中間優(yōu)化語言TIR,完整支持Oracle PL/SQL語法,并在4類技術(shù)場景實現(xiàn)創(chuàng)新和性能提升。
? 為了支持多個數(shù)據(jù)庫方言,傳統(tǒng)解釋器方式導(dǎo)致重復(fù)工作量會很大。KunDB3.0通過統(tǒng)一的中間優(yōu)化語言TIR,表達任意的過程式語義及SQL語義,支持multi pass編譯與LLVM IR組合,低偶合、低成本的擴展不同數(shù)據(jù)庫PL/SQL語法體系
? 傳統(tǒng)技術(shù)將PL/SQL翻譯成函數(shù)執(zhí)行方式,沒有控制流代碼優(yōu)化空間。KunDB3.0通過轉(zhuǎn)譯LLVM,將PL/SQL轉(zhuǎn)為底層語法,可以與llvm的 multi pass優(yōu)化結(jié)合,增加代碼優(yōu)化規(guī)則,從而優(yōu)化存儲過程的執(zhí)行
? 傳統(tǒng)翻譯成函數(shù)執(zhí)行的方式,無法進一步實現(xiàn)編譯執(zhí)行。KunDB3.0引入統(tǒng)一表達式處理引擎技術(shù),SQL與PL/SQL可復(fù)用編譯優(yōu)化,實現(xiàn)方式上比Oracle更加簡潔,同時節(jié)省了開發(fā)成本
傳統(tǒng)的異常處理無法實現(xiàn)零開銷。KunDB3.0參考LLVM的landing pad技術(shù),實現(xiàn)零開銷的異常處理系統(tǒng)。
全新的查詢優(yōu)化器和向量化執(zhí)行引擎,復(fù)雜分析性能提升10倍
KunDB從2.0到3.0的迭代中,為了更加友好的支持跨分片的復(fù)雜查詢分析,提升AP能力,KunDB基于火山模型重新設(shè)計了查詢優(yōu)化器,面向分布式存儲豐富了查詢優(yōu)化的規(guī)則,包括了分片下推、子查詢?nèi)リP(guān)聯(lián)化等十多種查詢優(yōu)化規(guī)則,相應(yīng)的擴展和優(yōu)化了block hash join、Index Lookup Join等二十多個算子,TPCH 子查詢性能相比于KunDB2.0均有大幅度提升,最高提升了近20倍。
KunDB3.0使用了全新的向量化執(zhí)行引擎,在內(nèi)存中使用列存儲的方式對數(shù)據(jù)進行轉(zhuǎn)換存儲后再進行計算,相比于內(nèi)存行式數(shù)據(jù)管理,在內(nèi)存資源占用、分析函數(shù)實現(xiàn)、表達式求值性能、壓縮支持上都更加具有優(yōu)勢。另一方面,執(zhí)行引擎基于多協(xié)程技術(shù),采用了基于流水線的并行處理框架,支持并行的數(shù)據(jù)掃描、算子間數(shù)據(jù)交換、算子計算、結(jié)果集返回等全鏈路過程,對于數(shù)據(jù)可分拆執(zhí)行的場景,性能有大幅提升。同樣的數(shù)據(jù)規(guī)模下以TPCH測試為參考,KunDB分析性能較MysQL有大幅度提升,22個Query最高性能提升可達到MySQL的近80倍。
基于TSO的全新分布式強一致事務(wù)處理,集群事務(wù)處理能力提升1倍
在分布式事務(wù)處理上,KunDB3.0使用基于全局時間戳的事務(wù)處理框架來代替2.0的全局事務(wù)管理器GTM方案。分布式層引入了TSO服務(wù)器分配時間戳,采用XA協(xié)議和時間戳優(yōu)化2PC保證分布式原子性寫,分布式事務(wù)開銷降低50%。基于事務(wù)提交時間戳可做到副本全局一致性讀,實現(xiàn)保證事務(wù)的讀寫分離。存儲層可基于當前時間戳和數(shù)據(jù)時間戳做全局一致性讀判斷,不依賴全局快照,性能更高,減輕中心化風險。
KunDB3.0集群的事務(wù)處理上限提升了6倍,達到300萬TPS,完全滿足頭部互聯(lián)網(wǎng)業(yè)務(wù)場景的性能需求。
此外,KunDB3.0也對存儲層性能和分布式架構(gòu)做了持續(xù)優(yōu)化。存儲層采用了面向內(nèi)存的數(shù)據(jù)存儲與管理、無鎖內(nèi)存索引技術(shù)、悲觀與樂觀結(jié)合的并發(fā)控制技術(shù)、并行查詢技術(shù),實現(xiàn)了存儲層性能接近1倍的提升。結(jié)合分布式層在通信鏈路優(yōu)化為基于MySQL協(xié)議的通信,放棄了高開銷的grpc通信;元數(shù)據(jù)存儲的改造為高吞吐的關(guān)系型存儲,以及減少組件、管理組件精簡為一個全局服務(wù),優(yōu)化了分布式層的開銷。在4分片的拓撲下,TPCC性能較2.0提升了60%。
跨機房容災(zāi)架構(gòu),任意時間點全局一致性恢復(fù)
在容災(zāi)方面,KunDB優(yōu)化了跨機房容災(zāi)架構(gòu),支持全鏈路高可用和全局一致性恢復(fù)。計算引擎完全無狀態(tài),擴展便捷,可實現(xiàn)多節(jié)點部署;存儲引擎支持主備/Paxos復(fù)制,支持故障時主備切換;元數(shù)據(jù)服務(wù)也都是基于多數(shù)派協(xié)議支持故障時自動選主,實際部署時避免了單節(jié)點部署的風險。通過跨機房的副本數(shù)據(jù)強同步,保證了機房級故障時,恢復(fù)點目標RPO=0。
通過副本可讀技術(shù),最大化利用每個角色提升系統(tǒng)吞吐,并且支持基于業(yè)務(wù)負載和組件健康狀態(tài)的路由變化,提升系統(tǒng)穩(wěn)定性。
KunDB3.0支持物理備份與實時binlog備份,故障時可恢復(fù)過去任意時間點。新增的一致性備份恢復(fù)能力,基于時間戳信息保障數(shù)據(jù)庫恢復(fù)到最新的一致性點,避免了分布式數(shù)據(jù)庫恢復(fù)后需要人為參與事務(wù)點對齊的難題。各分片獨立并發(fā)備份,每分鐘完成數(shù)GB數(shù)據(jù)備份,在高并發(fā)核心系統(tǒng)中,能夠有效降低備份對業(yè)務(wù)的影響。
保證全局事務(wù)的一體化實時AETP,同時提供高性能交易與分析服務(wù)能力
中國信通院2021年數(shù)據(jù)發(fā)展研究報告中指出,企業(yè)通常維護不同數(shù)據(jù)庫來支持聯(lián)機事務(wù)處理(OLTP)與聯(lián)機分析處理(OLAP)任務(wù),管理和維護成本高。基于創(chuàng)新的計算存儲框架的HTAP 數(shù)據(jù)庫,能夠基于同一套引擎同時支撐業(yè)務(wù)系統(tǒng)運行和分析決策場景,避免在傳統(tǒng)架構(gòu)中,在線與離線數(shù)據(jù)庫之間大量的數(shù)據(jù)交互,成為未來數(shù)據(jù)庫發(fā)展的趨勢之一。
KunDB3.0采用了基于分析引擎增強分布式事務(wù)處理引擎技術(shù)(ATEP),大幅提高了KunDB的數(shù)據(jù)分析能力,通過一個系統(tǒng)就可以同時提供高性能AP和TP服務(wù)能力。
對外提供統(tǒng)一的SQL引擎作為統(tǒng)一入口,簡化用戶操作,數(shù)據(jù)在庫內(nèi)即可自動同步、轉(zhuǎn)換,不需要繁瑣的ETL組件和ETL過程,數(shù)據(jù)無需出庫即可完成計算。同時提供統(tǒng)一數(shù)據(jù)類型和方言支持,將多種數(shù)據(jù)庫語言變?yōu)橐环N語言,大大降低開發(fā)和遷移成本。
針對不同程度的分析負載,通過全局優(yōu)化器自動識別SQL,利用不同的引擎進行處理,TP引擎和AP引擎根據(jù)工作負載做自動路由和自動查詢優(yōu)化,如針對復(fù)雜加工邏輯,則使用AP引擎分布式計算能力直接讀取KunDB上的數(shù)據(jù)進行復(fù)雜計算;針對高并發(fā)明細檢索,則使用TP引擎提供服務(wù)。
使用行列混合存儲方案,列存提供給AP引擎支持高性能分析,同時列存作為TP庫的只讀副本,實時從行存同步事務(wù)最新數(shù)據(jù)庫,延遲低于10s,保證了數(shù)據(jù)分析的時效性和全局一致性讀。
對于已經(jīng)部署了ArgoDB或KunDB的用戶,可以直接升級到AETP數(shù)據(jù)庫,無需改造業(yè)務(wù)和數(shù)據(jù)庫的交互方式,實現(xiàn)快速平滑升級。
通過不斷的打磨和對業(yè)務(wù)場景不斷的落地實踐,星環(huán)科技關(guān)系型數(shù)據(jù)庫ArgoDB和KunDB已經(jīng)在金融、政務(wù)、能源、醫(yī)療、交通等多個行業(yè)應(yīng)用,成功替代Oracle、MySQL等傳統(tǒng)業(yè)務(wù)數(shù)據(jù)庫。未來,星環(huán)科技將繼續(xù)深耕數(shù)據(jù)庫領(lǐng)域,通過不斷的技術(shù)創(chuàng)新和應(yīng)用創(chuàng)新,為用戶提供更完備功能,更高性能、更穩(wěn)定可靠的國產(chǎn)化數(shù)據(jù)庫產(chǎn)品。
5月31日2024向星力·未來數(shù)據(jù)技術(shù)峰會在上海隆重舉辦。
關(guān)注IT圈的應(yīng)該都知道,業(yè)內(nèi)普遍認可度最高、最想上的報告肯定是Gartner家發(fā)布的,因為從他們過往...
近期發(fā)展的《數(shù)字中國發(fā)展報告(2021年)》顯示,2017年到2021年,我國數(shù)據(jù)產(chǎn)量從2.3ZB增...
隨著銀行信用風險不斷累積并加快暴露,風險類型呈現(xiàn)多元化特征,資產(chǎn)質(zhì)量形式日益嚴峻;同時數(shù)字化、線上化...
11月21日上午,山東省委、省政府在濟南召開民營企業(yè)座談會,全面貫徹習(xí)近平總書記關(guān)于民營經(jīng)濟發(fā)展的重...
“中國投資年會”作為私募股權(quán)行業(yè)的年度盛會,已成功舉辦了18屆,吸引了全國VC/PE領(lǐng)域從業(yè)者的廣泛...
11月22日至25日,第五屆“長三角國際文化產(chǎn)業(yè)博覽會”在國家會展中心(上海)拉開帷幕
11月22日,遙感衛(wèi)星應(yīng)用國家工程研究中心2024年年會暨創(chuàng)新成果發(fā)布會在京舉辦。
近日,進口跨境免稅電商平臺“澳免跨境全球購”宣布完成5000萬元人民幣的A輪融資,本輪融資由東升資本...
作為中國預(yù)防醫(yī)學(xué)領(lǐng)域領(lǐng)軍企業(yè)的美年健康集團,多年來積極推進我國職場健康管理服務(wù)。
11月21日,第五屆中關(guān)村“醫(yī)工谷”創(chuàng)新創(chuàng)業(yè)高峰論壇在北京成功舉辦。
今年以來,新“國九條”對活躍并購重組市場做出了重要部署,一系列并購重組政策陸續(xù)出臺,釋放諸多利好信號...
投資家網(wǎng)(m.51baobao.cn)是國內(nèi)領(lǐng)先的資本與產(chǎn)業(yè)創(chuàng)新綜合服務(wù)平臺。為活躍于中國市場的VC/PE、上市公司、創(chuàng)業(yè)企業(yè)、地方政府等提供專業(yè)的第三方信息服務(wù),包括行業(yè)媒體、智庫服務(wù)、會議服務(wù)及生態(tài)服務(wù)。長按右側(cè)二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。
2016年注冊于北京的中氫新能技術(shù)有限公司,下設(shè)位于大興的裝備制造公司、位于海淀區(qū)的技術(shù)研究院、材料...
一度無比高光的理想汽車,猝不及防遭遇重挫。
2024年1月10日,由投資家網(wǎng)主辦,財經(jīng)銳眼、有時間協(xié)辦,北京微金科技有限公司承辦的“第十二屆股權(quán)...
2024年1月10日,由投資家網(wǎng)主辦,財經(jīng)銳眼、有時間協(xié)辦,北京微金科技有限公司承辦的“第十二屆股權(quán)...
2024年1月10日,由投資家網(wǎng)主辦,財經(jīng)銳眼、有時間協(xié)辦,北京微金科技有限公司承辦的“第十二屆股權(quán)...