疫情常態(tài)化時(shí)期,夯實(shí)數(shù)字化基礎(chǔ)支撐,提升企業(yè)數(shù)字化核心能力,將是企業(yè)應(yīng)對不確定、動(dòng)態(tài)環(huán)境的必然選擇。3月24日,星環(huán)科技全新發(fā)布了企業(yè)級一站式大數(shù)據(jù)綜合平臺TDH 8.0版,專注于幫助企業(yè)級用戶,快速搭建強(qiáng)大的數(shù)字底座,更智能、更全面、更便捷、更安全地運(yùn)用數(shù)據(jù),加速企業(yè)數(shù)字化轉(zhuǎn)型。
星環(huán)科技堅(jiān)持自主創(chuàng)新研發(fā),保障系統(tǒng)安全可控,為用戶提供大數(shù)據(jù)存儲(chǔ)、大數(shù)據(jù)分析、實(shí)時(shí)計(jì)算、綜合搜索、數(shù)據(jù)挖掘等基礎(chǔ)能力,為企業(yè)建設(shè)數(shù)據(jù)湖、數(shù)據(jù)倉庫、數(shù)據(jù)中臺提供平臺支撐,為企業(yè)數(shù)字化轉(zhuǎn)型助力。
全新的TDH 8.0采用了領(lǐng)先的多模型技術(shù)架構(gòu)和統(tǒng)一數(shù)據(jù)管理,支持8種存儲(chǔ)引擎、10種存儲(chǔ)模型,自動(dòng)化應(yīng)對多部門業(yè)務(wù)需求,能夠支撐用戶各種高階的數(shù)據(jù)分析場景,幫助用戶完成數(shù)據(jù)自動(dòng)化管理,實(shí)現(xiàn)業(yè)務(wù)價(jià)值。
TDH 8.0采用了行業(yè)首創(chuàng)的5個(gè)層次的統(tǒng)一的多模型技術(shù)架構(gòu),包括了實(shí)時(shí)流處理引擎Slipstream、關(guān)系型分析引擎Inceptor、寬表數(shù)據(jù)庫Hyperbase、搜索引擎Transwarp Scope、地理空間數(shù)據(jù)庫Spacture、圖數(shù)據(jù)庫StellarDB、時(shí)序數(shù)據(jù)庫TimeLyre、鍵值數(shù)據(jù)庫KeyByte、事件存儲(chǔ)Transwarp Event Store、數(shù)據(jù)挖掘與機(jī)器學(xué)習(xí)平臺Sophon Discover 10款核心產(chǎn)品,滿足用戶不同的應(yīng)用場景的需求。同時(shí)配套Manager、Guardian、Aquila、Audit等工具,使TDH的安裝、管理、開發(fā)、運(yùn)維、升級便捷,給用戶帶來極致的體驗(yàn)。
獨(dú)創(chuàng)的五層大數(shù)據(jù)平臺架構(gòu)
星環(huán)科技在TDH 8.0中首次采用了獨(dú)創(chuàng)的五層大數(shù)據(jù)平臺架構(gòu),其中最底層是貼合服務(wù)器硬件和操作系統(tǒng)的統(tǒng)一的資源調(diào)度層——星環(huán)云操作系統(tǒng)TCOS。TCOS針對多模型數(shù)據(jù)庫的技術(shù)特點(diǎn),優(yōu)化了資源調(diào)度策略,提升了產(chǎn)品性能,為用戶提供高性價(jià)比的解決方案。
尤其值得一提的是TCOS 基于先進(jìn)的云原生技術(shù)構(gòu)建,適配了多種主流的CPU架構(gòu)和多種操作系統(tǒng),支持不同硬件、不同操作系統(tǒng)的服務(wù)器混合部署。在集群擴(kuò)容時(shí),客戶不用擔(dān)心新舊設(shè)備兼容性問題,資源利用率更高。
TCOS之上是存儲(chǔ)層。在存儲(chǔ)管理層,星環(huán)開發(fā)了統(tǒng)一的分布式數(shù)據(jù)管理系統(tǒng)TDDMS,為不同存儲(chǔ)引擎提供公共的存儲(chǔ)管理服務(wù),包括保障數(shù)據(jù)均勻分布、負(fù)載均衡等數(shù)據(jù)分片服務(wù),多副本管理、數(shù)據(jù)一致性等數(shù)據(jù)高可用服務(wù),以及數(shù)據(jù)平滑擴(kuò)容縮容等服務(wù)。
在存儲(chǔ)引擎層,TDH 8.0提供了8種獨(dú)立的存儲(chǔ)引擎,支持業(yè)界主流的10種存儲(chǔ)模型。獨(dú)立的存儲(chǔ)引擎保障了不同存儲(chǔ)模型的高性能。用戶可以根據(jù)業(yè)務(wù)的需要,隨時(shí)增減不同的存儲(chǔ)引擎,做到資源按需分配。
存儲(chǔ)層之上是計(jì)算層。TDH 8.0使用了星環(huán)科技自研的統(tǒng)一的分布式計(jì)算引擎Transwarp Nucleon核子,實(shí)現(xiàn)高性能跨模型計(jì)算。計(jì)算引擎能根據(jù)不同的存儲(chǔ)引擎自動(dòng)匹配高性能算法,無需用戶手工干預(yù),從而便捷地實(shí)現(xiàn)跨庫關(guān)聯(lián),避免數(shù)據(jù)導(dǎo)入導(dǎo)出。
最上層是星環(huán)科技統(tǒng)一的SQL編譯器Transwarp Quark。TDH中的各個(gè)數(shù)據(jù)庫產(chǎn)品遵從一致的SQL規(guī)范。客戶不會(huì)因?yàn)閳鼍扒袚Q、數(shù)據(jù)庫切換而造成接口、開發(fā)語言的切換而煩惱,開發(fā)人員學(xué)習(xí)成本低,開發(fā)的代碼可移植性強(qiáng),技術(shù)對接容易。
在架構(gòu)上,TDH采用的存算解耦架構(gòu),可以構(gòu)建服務(wù)于整個(gè)企業(yè)的統(tǒng)一數(shù)據(jù)資源庫,讓不同部門的數(shù)據(jù)間的隔閡徹底打破,使跨部門數(shù)據(jù)靈活調(diào)用擁有了技術(shù)支撐。用戶可以根據(jù)業(yè)務(wù)的變動(dòng),按需創(chuàng)建新模型,按需申請計(jì)算和存儲(chǔ)資源。任務(wù)的生命周期結(jié)束時(shí),可以釋放占用的計(jì)算和存儲(chǔ)資源,回收到集群資源池中。
星環(huán)科技獨(dú)創(chuàng)的存算完全解耦,為客戶提供了存儲(chǔ)能力和計(jì)算資源獨(dú)立擴(kuò)容的能力,帶來高度彈性與資源利用率最大化,為用戶提供最適合業(yè)務(wù)需要的資源配置。
八款異構(gòu)存儲(chǔ)引擎 同時(shí)支持10種存儲(chǔ)模型
當(dāng)今“單一模型數(shù)據(jù)庫多個(gè)并用”模式面臨諸多難題,如開發(fā)接口不統(tǒng)一,操作難度高,維護(hù)成本高,數(shù)據(jù)跨庫關(guān)聯(lián)困難,資源擴(kuò)容縮容不靈活等。如何解決用戶面臨的這些問題,使得數(shù)據(jù)庫能夠進(jìn)行跨部門、跨業(yè)務(wù)的數(shù)據(jù)統(tǒng)一存儲(chǔ)與管理,實(shí)現(xiàn)多業(yè)務(wù)數(shù)據(jù)融合,支撐多樣化的應(yīng)用服務(wù),成為企業(yè)用戶大數(shù)據(jù)應(yīng)用的重要需求。
去年5月星環(huán)科技TDH 7.0發(fā)布時(shí),星環(huán)科技首次公開展示了“統(tǒng)一計(jì)算框架,統(tǒng)一數(shù)據(jù)管理,按需增減異構(gòu)數(shù)據(jù)存儲(chǔ)引擎的多模型數(shù)據(jù)平臺架構(gòu)”,不僅能解決企業(yè)用戶面臨的這些難題,還能在性能上超越“單一模型數(shù)據(jù)庫多個(gè)并用”模式。
本次發(fā)布的TDH 8.0進(jìn)一步完善了10種主流存儲(chǔ)模型的兼容性,能夠支撐用戶各種挑戰(zhàn)的、高階的數(shù)據(jù)分析場景。
據(jù)悉,TDH 8.0通過8種獨(dú)立的存儲(chǔ)引擎,支持業(yè)界主流的10種存儲(chǔ)模型。這8種存儲(chǔ)引擎是:關(guān)系型數(shù)據(jù)存儲(chǔ)引擎、寬表存儲(chǔ)引擎、搜索引擎、地理空間存儲(chǔ)引擎、圖存儲(chǔ)引擎、鍵值存儲(chǔ)引擎、事件存儲(chǔ)引擎和時(shí)序存儲(chǔ)引擎。
用戶可以根據(jù)業(yè)務(wù)的需要隨時(shí)增減不同的存儲(chǔ)引擎,做到資源按需分配。
四款大數(shù)據(jù)工具組件升級
TDH 8.0全面升級的四款大數(shù)據(jù)工具組件,讓系統(tǒng)的安裝部署、擴(kuò)容升級、安全防衛(wèi)、風(fēng)險(xiǎn)告警、權(quán)限管理等工作變得更便捷。
通過平臺配套的Transwarp Manager 管理服務(wù)產(chǎn)品,用戶只需通過幾個(gè)手動(dòng)步驟,就可以部署一個(gè)TDH集群。可視化的界面讓TDH的安裝、配置十分輕松。產(chǎn)品的健康檢測、度量、監(jiān)控、告警功能,也讓集群的管理和運(yùn)維變得簡單、容易。同時(shí),TDH 8.0適配了多種國產(chǎn)平臺和操作系統(tǒng),提升了節(jié)點(diǎn)通信安全性和可靠性,對圖形界面做了改進(jìn),帶給用戶更好的使用體驗(yàn)。
Transwarp Guardian是TDH配套的安全管理產(chǎn)品。它保護(hù)集群免受惡意攻擊和安全威脅,提供靈活安全的權(quán)限配置,并且可以對資源做細(xì)粒度的ACL控制。在TDH 8.0版本中,Transwarp Guardian 新增了豐富的運(yùn)行指標(biāo),優(yōu)化了高并發(fā)權(quán)限查詢性能,改善了信息的總體展示效果,用戶能夠更清晰、更直觀地了解平臺的潛在安全風(fēng)險(xiǎn),從而及時(shí)做出相應(yīng)的優(yōu)化策略。
作為TDH平臺中最常使用的組件,Transwarp Aquila智能運(yùn)維產(chǎn)品,提供了監(jiān)控儀表盤、告警通知、日志生命周期管理、日志檢索、審計(jì)日志等多項(xiàng)功能,幫助運(yùn)維人員從各個(gè)維度便捷的運(yùn)維整個(gè)集群。TDH 8.0版本優(yōu)化了告警策略和通知模板,新增了豐富的指標(biāo)、日志和告警規(guī)則,加入了拓?fù)湔故镜雀呒夁\(yùn)維功能。
TDH配套的一站式審計(jì)產(chǎn)品Transwarp Audit整合了大數(shù)據(jù)平臺各節(jié)點(diǎn)中的監(jiān)控信息,實(shí)現(xiàn)了對數(shù)據(jù)訪問和操作的集中監(jiān)控、查看和管理的智能化、可視化審計(jì)。在TDH 8.0版本豐富了審計(jì)規(guī)則,利用決策引擎判定安全風(fēng)險(xiǎn),自動(dòng)發(fā)現(xiàn)異常訪問、越權(quán)操作等安全問題,并通過短信郵件推送到相關(guān)人員報(bào)備。
數(shù)據(jù)庫和大數(shù)據(jù)技術(shù)融合發(fā)展大勢所趨。星環(huán)新一代的多模型數(shù)據(jù)管理平臺TDH 8.0應(yīng)時(shí)而生,用簡潔清晰的技術(shù)架構(gòu),支持紛繁復(fù)雜、千變?nèi)f化的用戶場景,在追求極致性能的同時(shí),提供易開發(fā)、易運(yùn)維的一站式服務(wù),讓用戶通過便捷的接入的方式,友好的開發(fā)環(huán)境,輕松地搭建、開發(fā)、運(yùn)維自己的數(shù)據(jù)平臺和應(yīng)用。