星環科技重構數據雲平台,持續釋放數據紅利和價值

　　衆所周知,如今的世界正在以加速度進入到智能時代,特别是随着各項業務的雲化深入以及萬物互聯,數據處理能力的進一步提升,智能算法一次又一次的突破,以及雲計算在傳統産業的更密集的滲透,逐漸形成了“物理世界信息化、信息世界智能化”的新特征。

　　在此大背景下,傳統數據管理平台僵化且集中的架構對企業實現數字化和智能化轉型顯然難以提供更長久的支撐。因此,一個以數據為中心,且能夠把數據、應用、智能融合為一體的架構和平台,在為企業提供靈活管理和分析處理數據的同時,也能夠把數據源源不斷的轉換為智能和洞察,為企業創造更加敏捷的行動力與速度,已是大勢所趨。

　　而星環科技創新推出的Transwarp Data Cloud(TDC)數據雲平台,就是為滿足企業對于數據雲需求而打造的全新雲原生平台,它采用容器技術,以數據為中心,通過提供完整的數據、應用和智能的開發工具,實現了數據和應用的互通互聯,對企業擁抱數字化和智能化,釋放數據的紅利和價值,可以說提供了堅實的技術架構底座。

　　毫無疑問,TDC數據雲平台不僅是星環科技在大數據、實時數據處理領域、大數據和雲融合領域以及機器學習、人工智能領域技術創新的“集大成者”,同時其以雲平台為基礎,以數據為中心,以智能化為方向的建設方式,也在整個市場中重新定義了數據基礎設施技術升級的新範式和技術選型判斷的新标尺。

　　數據管理平台演進和疊代

　　星環科技研發總監劉汪根告訴我,數據管理平台在此之前經曆了大概三個發展階段:

　　2010年之前,以傳統的MPP的數據庫為主,以Teradata、Oracle RAC為代表的傳統時代,這一套數據管理系統為企業産出了各種各樣的數據報表,也為企業實現數據分析打下了一定的基礎。

　　但這種傳統的數據管理平台也有很大的“短闆”,包括可擴展性差,難以滿足企業大規模數據處理的要求;數據分析無法實時産生,無法滿足企業對數據實時産出的要求;同時,對非結構化數據無法處理,也讓數據的開發和利用隻局限在很小的領域,可以稱之為數據有限分析的時代。

　　2010年左右,以Hadoop、Spark技術為代表的大數據技術逐個興起,它幫助企業在數據管理中解決了三大痛點,包括性能可擴展的難題;對非結構化數據處理有了支撐;同時數據處理的實時性難題在Spark等新技術的加持下也得以逐漸解決。

　　同樣在這一時期,企業的業務系統普遍存在“煙囪式”業務系統,從而導緻企業的數據管理、應用效率偏低,更多是通過離線的數據接入來滿足業務需求。所以,企業開始建設除了分析業務系統以外的在線數據業務系統。但問題也随之而來,那就是數據、應用和AI平台之間相互獨立,企業隻能通過接口層做有限的數據與應用交互,這也使得數據價值并沒有得到充分釋放。

　　2015年至今,随着各種新技術的發展與融合,又進一步推動了數據管理的發展。特别是雲計算、AI、IoT、5G等新技術的先後湧現,使得數據的應用層出不窮,同時也産生了新的數據形态、新的部署環境、以及新的應用模式。

　　更重要的是,相比前兩個階段,這一階段企業的數據管理面臨着前所未有的新挑戰,具體來說,就是數據資産化、數據業務化和業務智能化。

　　一是,數據資産化,是指數據正承載着越來越多的價值,企業從數據中提取洞察的訴求變得越來越急迫,因此數據正逐漸成為企業一項重要的資産,并創造價值。而數據資産化,就是要通過更加簡單和高效的方式,讓用戶可以更好的獲取或者使用數據。

　　二是,數據業務化,是指需要基于大數據平台與數據倉庫之上的數據應用中心,并結合完善的數據治理方案,把數據通過業務模塊化、抽象化,最終逐漸完成豐富的數據服務集市,服務前端快速構建所需新型業務。

　　三是,業務智能化,是指随着企業業務人員對數據的需求越來越多,企業需要開發出大量新的數據應用來持續的疊代業務,改進用戶體驗,包括實時類、AI類、在線數據類業務的大量創新和嘗試,這就要求數據、AI和應用能夠非常有機的融合,最終在一個雲上來支持彈性、靈活的數據和應用雲。

　　在劉汪根看來:“現在業界所提的數字化轉型,其本質就是企業希望未來所有的決策流程都能以數據化作為支撐,這也就意味着企業傳統的數據管理方式需要進行升級,同時還必須基于雲平台形成新的數據開發方式,最終讓數據轉換為智能洞察,更好的幫助企業實現數字化和智能化業務的呈現。”

　　星環科技重構數據雲平台

　　正是洞察到了市場的重大變化,星環科技早在2015年就啟動了新一代Transwarp Data Cloud(TDC)數據雲平台的研發,并于2018年發布了TDC 1.0版本,今年5月又再次發布TDC 2.0版本。

　　劉汪根表示,如果說TDC 1.0解決了大數據的雲化問題,那麼TDC 2.0版本則是業内通過雲原生技術提供了完整的數據PaaS、應用PaaS和分析PaaS的數據雲平台。

　　值得一提的是,TDC 2.0與上一版本相比它能更全面的滿足不用業務,不同角色的工作需求,為企業數字化的轉變提供更完善的支撐;同時也比業内通過混合方式構建的數字化解決方案,能夠更好的實現數據、應用和智能的融合。

　　首先,在數據平台服務方面,TDC 2.0新增了自研的閃存分析型數據庫ArgoDB,以及圖數據庫StellarDB以及分布式交易型數據庫KunDB。目前星環已經覆蓋了幾乎所有類别的數據庫和NoSQL,并且都是基于分布式技術打造,可為企業不同的數據應用場景,提供了全方位的支持。

　　其中,KunDB是星環科技專門為新一代雲業務提供服務的雲原生數據庫,可以作為企業微服務化之後的後台數據庫對業務提供支撐。同時KunDB采用了多租戶設計,可支撐業務建設中心化的趨勢,而且作為國産自主可控的數據庫,KunDB也可以适配各種國産化硬件,為企業創造完全自主可控的環境。

　　“我們數據庫的種類到現在為止,已經做到品類的覆蓋,并且都是從企業的實際需求出發。每一類數據庫,隻要星環科技出品我們都做到技術的性,對此我們有相當的信心和底氣。”劉汪根說。

　　其次,在應用平台服務方面,星環科技以自研的容器操作系統(TCOS)為基礎,為企業提供了應用開發的各種框架以及中間件,解決了企業應用開發、部署、運維、治理的效率問題,可應對企業面臨的各類應用開發和管理障礙。

　　具體包括,星環科技提供了基于雲原生技術構建的企業應用市場,每個企業可以根據自己的需求來構建自應用市場;提供了完成混合雲的管理技術,無論數據、服務是構建在邊緣端,還是在公有雲或其他私有雲,隻要通過容器化的技術,TDC都可以實現統一管理和調度,無需關注部署落地細節;此外,提供了融合的安全管理技術,無論是數據還是資源,隻要接入星環的管理的API和管理體系,都能夠提供整套的數據鍊路安全管控。

　　最後,在數據分析平台服務方面,星環科技提供了統一的數據開發技術,基于SQL的數據開發技術,以及基于Python的數據科學分析,可以滿足企業數據分析服務内外開放的需求,同時也允許大量數據工程師、數據科學家在一個平台上并發工作,促進相互協作。

　　劉汪根介紹,一方面星環科技通過企業級數據資産目錄Data Catalog解決了企業數據資産管理混亂的問題,同時也為企業數據治理提供可靠、便捷、智能的全流程工具支撐,從而更加有效的發掘和利用信息資産的價值;另一方面,在此基礎上,星環科技引入了人工智能平台Sophon,把整個數據建模,數據特征提取,包括最終數據模型的發布,都得到了統一的管理,通過完整的數據分析服務解決了數據的智能化問題。

　　由此可見,通過構建數據、應用、智能融合的數據雲平台,星環科技真正幫助了企業打通了全域數據鍊接、建立統一的數據服務能力,并大大推動了企業擁抱數字化和智能化的進程。

　　持續釋放數據紅利和價值

　　在我看來,星環科技以及其TDC數據雲平台,無論是對企業的數字化和智能化轉型,以及持續釋放數據的紅利和價值,乃至對未來整個數據管理市場的發展和演進,都将起到三個方面的重要價值:

　　第一,确立了以數據為中心的建設新理念。目前數據管理平台的建設方式有兩種思路,一種是以OpenStack為代表的以資源為中心的建設方式,采用虛拟化技術将底層資源包裝成個各種服務,用戶可以租用這些資源,在上面構建各種應用。

　　但這種方式依然是以資源管理為中心,企業還是采用煙囪式技術棧,比較難在平台上打通應用和數據。而以星環科技TDC為代表的以數據為中心的建設方式,先在上層支撐應用建設,通過提供數據資産服務、應用開發和數據分析的完整工具鍊,不僅加速了數據、應用和智能三大核心原料的融合,也實現了以數據驅動應用的最終目标。

　　第二,推動了數據基礎架構升級的新範式。我們知道,如今在IaaS領域正通過過雲平台的微服務化和一體化設計建設新一代的私有雲,這樣不僅可以從交付、運維、升級實現“交鑰匙工程”,也使得新一代私有雲按需付費的雲服務模式得以實現,更讓私有雲從過去的雲軟件時代進入雲服務的新時代。

　　同樣,在PaaS領域,以星環科技TDC為代表的數據雲平台也采取類似的重構方式,通過容器化技術來運行各種工作負載,提供多租戶、自動擴展資源、服務自監控等能力,實現開發與運維的平衡。此外,在數據雲平台上又提供了各種數據資源服務,包括大數據、AI、流計算、數據資産等,在為整個技術架構提供堅實底座的同時,更大大推動了數據基礎架構升級的新範式。

　　第三,釋放了數據持續賦能企業的新價值。進入數字化、智能化的新時代,數據正在以驚人的速度增長,幾乎觸及各行各業,許多企業都被迫尋找新的創造性方法來管理和控制如此龐大的數據,當然這麼做的目的不隻是管理和控制數據,而是要分析和挖掘其中的價值,以此來促進業務的發展。

　　從這個角度來說,星環科技TDC數據雲平台以其資源彈性伸縮、快速部署疊代、支撐微服務化開發、資源管理編排等能力,很好的打通了數據與業務之間的鍊接難題,持續釋放了數據的紅利和價值,對企業實現數字化和智能化轉型都将起到重要的加速作用。

　　如劉汪根最後所言:“衡量一個企業數字化和智能化轉型,無非就是做好三件事情,即數據、應用和智能,那麼如今通過星環科技TDC數據雲平台,企業的數據資産無論是從0到1,還是從1到100,都能快速的搭建起來,由此可以推動業務産生更多的價值和作用,而這也是星環科技一直以來踐行的科技賦能企業的新方式。”