近日,大數據分析/數倉軟件巨頭Teradata宣布基于中國未來商業環境評估,退出在中國的直接運營,後續将進入中國公司關閉程序。
星環科技經過多年的自主研發打造了一系列大數據基礎軟件,并打磨了一系列國産化替代平滑遷移方案,能夠更好幫助企業用戶更高效、更平滑、更安全的實現國外進口産品的國産化替代。自主研發的分布式分析型數據庫ArgoDB經工信部電子第五研究所代碼掃碼測試,代碼自主率(行數)超90%,可支持标準SQL語法,兼容Oracle、IBM DB2和 Teradata等方言,通過一個ArgoDB數據庫,就可以打造一站式離線數據倉庫、實時數據倉庫、數據集市和聯邦計算平台等數據分析系統,同時已與國内主流軟硬件信創廠商完成了兼容适配互認證,滿足信創驗收要求。作為一款的數據庫産品,目前ArgoDB已在各行各業成功替代Oracle、DB2、Teradata等國外産品。
例如,某農商行采用星環科技分布式分析型數據庫ArgoDB建設了新一代湖倉一體平台,平滑替代了原Teradata一體機,實現了多數據平台合一,降低了原有同質化的數據系統運維開發成本和數據冗餘,綜合成效比達到Teradata的14倍。
傳統數倉架構面臨衆多挑戰
随着互聯網金融生态的發展,該農商行和實體經濟的業務聯系和深度融合進展迅速,業務數據的内容不斷豐富,數據規模也不斷增長。伴随該農商行業務的快速發展,傳統數據倉庫技術架構面臨越來越大的挑戰,其表現如下:
(1)大部分傳統數據倉庫對分布式并行計算模式的支持不夠,難以實現處理能力的水平彈性擴展,依賴于服務器硬件的升級實現處理能力擴容,不僅成本高昂,而且受到服務器硬件升級周期較長等的限制。
(2)商業銀行因業務複雜性和多樣性的原因,現存的數據應用系統種類較多。在單個數據庫系統處理能力有限的情況下,普遍存在應用各自獨立建設,缺乏統籌規劃,系統間數據處理職責劃分不合理、囗徑不一緻,存在大量的重複加工和數據冗餘的問題。
(3)傳統數據倉庫軟件主要面向數據分析型應用,無法兼顧實時營銷與實時風險管理等高并發、低延遲應用場景需要,較難處理非結構化數據,難以快速實現業務團隊的數據探索、數據挖掘與業務建模需求。
基于以上情況,該農商行基于自身發展需求,參考業界先進架構以及同業案例,在2017年引入星環科技的TDH平台,構建了以分布式大數據技術為基礎的大數據平台。同時引進星環分布式分析型數據庫ArgoDB産品,采用ArgoDB集群替代Teradata一體機。
選擇星環ArgoDB+TDH實現湖倉一體
該農商行從企業應用角度出發,通過對國内外衆多主流大數據平台産品的技術能力和實現細節詳細了解、對比、篩選,并對候選産品進行嚴格的POC測試,最終選擇了更符合自身需求的國産TDH大數據平台産品。通過TDH大數據平台的建設,實現成本管理和業務管控的雙效提升。
選擇TDH大數據平台産品,該農商行可以采用普通的服務器和存儲進行搭建,在經濟效益層面,經初步估計,數據應用的總體硬件投入成本将比采用傳統模式低不少;數據庫軟件授權許可費預計隻有原來的1/20;同時由于各應用構建在同一個大數據平台上,因此每個應用減少了大量的共性數據加工和數據共享代碼開發,軟件開發成本也有所降低。
在系統效率層面,TDH充分利用分布式計算以及内存處理(ArgoDB)技術,在處理同樣數據量情況下,大數據量跑批處理時間預計能大幅降低,大大提升了該農商行在營銷、風控、運營等業務流程上的響應能力。
綜合成效比提升14倍
該農商行基于星環ArgoDB+TDH的湖倉一體平台,實現了多數據平台合一,進行數據資産管理,降低了原有同質化的數據系統運維開發成本和數據冗餘,實現了數據的遷移,保證了業務正常運行。
該農商行采用ArgoDB集群替代Teradata一體機,軟硬件使用時效從4年提升到10年,跑批時間從超過10個小時,降低到不到5個小時,綜合成效比達到Teradata的14倍。
同時,利用星環TDH和ArgoDB,該農商行完成數據倉庫彙總層關鍵50+張指标表遷移,實現了數據倉庫管理會計等800多個供數接口遷移,小數據平台120多下遊接口遷移,為下遊40多個系統提供支撐,更好地支持銀行智能化、數字化應用建設。
作為大數據基礎軟件國産化的重要推動者之一,星環科技還擁有成熟的基礎軟件替代解決方案:
*大數據基礎平台TDH可以完美的替代CDH/HDP和CDP,提升功能、性能、穩定性、易用性、擴展性、可靠性、安全、國産生态支持等能力,提供多種模型支持能力,性能的提升可以達到5到100倍,原廠專業服務能力更強。
*分布式交易型數據庫KunDB可以在交易型OLTP的業務場景、高并發在線數據服務場景,替代Oracle/DB2,并且提升存儲計算能力、高可用能力、跨分區事務能力。
*分布式分析型數據庫ArgoDB可以在批處理和OLAP、Ad hoc分析等場景,替代Oracle/DB2/TD/SAP HANA,提供海量數據分析能力,提升混合負載、實時數據分析等能力,軟硬件綜合性價比得到10到100倍的提升。
*分布式圖數據庫StellarDB可以在圖查詢、圖分析的場景替代Neo4j,提升圖數據存儲檢索能力,支持萬億頂點以上的圖存儲與毫秒級檢索性能,提供近30種分布式圖算法和10層以上深度鍊路分析能力。
*搜索引擎Scope可以在全文檢索、日志分析等場景替代ElasticSearch,提升穩定性、性能、集群擴展性等能力。
*智能分析工具Sophon可以在可視化建模分析場景替代SAS/SPSS,獲得200+算子支撐,提升功能和性能(降本增效)。
免責聲明：本文僅代表作者個人觀點，與每日科技網無關。其原創性以及文中陳述文字和内容未經本站證實，對本文以及其中全部或者部分内容、文字的真實性、完整性、及時性本站不作任何保證或承諾，請讀者僅作參考，并請自行核實相關内容。
本網站有部分内容均轉載自其它媒體，轉載目的在于傳遞更多信息，并不代表本網贊同其觀點和對其真實性負責，若因作品内容、知識産權、版權和其他問題，請及時提供相關證明等材料并與我們聯系，本網站将在規定時間内給予删除等相關處理.
