内外兼修,深信服新版企業級分布式存儲EDS即将發布

2020-08-06 17:18:35 來源:中華網科技
        【每日科技網】

  金庸大俠筆下的武俠世界之所以令人向往,

  不僅在于俠客們的快意恩仇,

  更在于精彩又不失嚴謹的武學架構,

  掌握一部武學秘籍往往意味着獨步武林,

  而在存儲界,

  一部“武學奧義”同樣暗藏于

  深信服企業級分布式存儲EDS版本!

  ●第一式:“外功”強健體魄 ●

  ——二副本、三副本靈活定義可靠性

  所謂内練一股氣,外練筋骨皮,

  具備一身強勁的“外功”,

  在面對不同的外部情況時都能應對自如。

  對一套存儲的可靠性而言,

  能夠承載故障發生很重要,

  對不同需求進行靈活适配同樣重要。

  目前市面上的多數存儲直接為用戶配置了三副本策略,以保障業務的高效運轉以及故障發生時業務的連續,但是三副本意味着要花費更高的成本。新版本EDS從用戶的實際需求出發,為用戶提供更靈活的選擇。

  首先,以LUN為粒度配置副本數和性能優先級策略,可以選擇為核心業務配置3副本高性能策略,非核心業務配置2副本低性能策略,實現按照業務需求靈活配置存儲能力。其次,新版本EDS通過塊存儲三副本機制,将三份副本數據互斥分布在多個存儲節點上,當節點發生故障時,可将業務連接快速切換到正常節點進行讀寫,保障業務的連續性。

圖1.gif

  根據業務需求靈活配置副本

  三副本可容納任意2節點故障,但會占3倍于業務數據量的存儲空間,2副本隻會占2倍存儲空間,但隻能容任意1節點故障,新版本EDS支持按照LUN配置副本數,用戶可根據業務的重要性配置,實現業務可靠性和容量利用率的均衡。同時用戶不必花費高昂的成本全部配置三副本,根據業務自主選擇即可。

  ●第二式:“内功”自行療傷 ●

  ——硬盤壞道主動預測掃描及修複

  如果說靈活定義可靠性相當于強化“外功”,

  那麼提升自我恢複能力則等于修煉“内功”。

  對于存儲硬盤而言,

  那些處在“隐秘的角落”的壞道,

  讓業務數據在單副本狀态下長期“裸奔”。

  的防禦就是主動出擊,

  放在新版本EDS再适合不過。

  當硬盤出現壞道時一般不容易被發現,隻有當客戶端訪問到壞道的數據且無法進行訪問時,壞道才會被發現。新版本EDS對硬盤進行了全方位保護,結合AI算法模型,推出了硬盤壞道預測、掃描修複及SSD壽命預測等一系列功能。

  首先,通過硬盤壞道預測收集分析大量壞道硬盤的SMART數據、性能參數與日志信息,結合算法訓練模型,可以預測出硬盤在未來7天内是否會出現壞道。其次,定時壞道掃描及修複可主動壞道掃描可及時發現潛藏的壞道,并利用壞道數據的另外一個副本将數據修複至硬盤保留扇區。最後SSD壽命預測,通過硬盤Smart信息以及硬盤的寫入量分析,結合算法訓練模型,預測出SSD的剩餘可用時間。

圖2.gif

  硬盤壞道主動掃描及修複

  通過壞道預測,壞道掃描和壞道修複形成壞道處理閉環,使硬盤壞道被發現的時長從原來的一個月縮短至,并完成修複,程度規避數據長期單副本的風險。(實際環境的測試數據,預測準确率高達95%以上)。通過SSD壽命預測,用戶可體檢對于壽命不足的SSD提前進行更換準備,避免硬盤損壞造成的業務宕機。

  ●第三式:“招式”唯快不破 ●

  ——億級文件、對象秒級檢索

  有道是“天下武功,唯快不破”,

  除了“内功”與“外功”之外,

  快速的“招式”修煉同樣重要,

  目的便是以效的方式解決問題。

  想要在大數據時代“乘風破浪”,

  數據檢索的速率起碼要足夠快。

  為了幫助用戶更高效地完成海量數據的快速檢索及調用,新版本EDS為數據建立了單獨的快速索引結構,使得數據能夠在十億級别文件規模下秒級快速檢索。

圖3.gif

  十億級别文件規模下秒級快速檢索

  采用這種将“搜索框”搬到了存儲裡面的方式,上億的文件隻需要輸入關鍵詞,即可秒級搜索出來想要查找的文件。2億海量文件檢索實測僅需1.8秒。文件檢索效率的提升也降低了用戶的管理成本。

  ●第四式:“心性”堅如磐石 ●

  ——億級小文件承載能力

  武學之集大成者,

  無不胸襟寬廣,心志堅定,

  面對再大的壓力及挑戰依然能夠

  泰然自若,巋然不動。

  海量小文件的穩定承載能力,

  是數字時代存儲所要具備的重要素質之一。

  EDS利用自主研發的分布式數據庫PhxKV,承載分布式NAS文件系統元數據,使得元數據系統在訪問的時延更低,以及在壞塊修複的時候不阻塞前端業務,而且修複速度極快。小文件可實現寫入即合并,使得存儲内部不存在任何的碎片文件,保證機械盤數據的正常業務讀寫訪問以及數據重構讀寫等等能夠性能不下降,數據重構每TB所需時間小于30mins。

  相較于主機文件系統或磁盤陣列NAS存儲,單文件系統支持的文件處理從千萬級提升到億級别。用戶通過軟件即可實現高性能的文件處理需求,不需要支出高昂的成本來購買硬件。

  要想真正做到獨步武林,

  需要兼備強勁的外功,深厚的内功,

  這些素質缺一不可。

  深信服新版本EDS向外強化“容障能力”,

  向内錘煉“修複能力”,

  拔高文件檢索速率,

  并強化海量小文件承載能力,

  真正做到“内外兼修”。

  在原有的高性能,高可靠,智能管理等特性的基礎上,新版本EDS進一步升級,靈活定義可靠性,硬盤壞而可查,檢索快速便捷,性能穩定,為用戶打造更安全、更高效的存儲服務。

免責聲明:本文僅代表作者個人觀點,與每日科技網無關。其原創性以及文中陳述文字和内容未經本站證實,對本文以及其中全部或者部分内容、文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關内容。
    本網站有部分内容均轉載自其它媒體,轉載目的在于傳遞更多信息,并不代表本網贊同其觀點和對其真實性負責,若因作品内容、知識産權、版權和其他問題,請及時提供相關證明等材料并與我們聯系,本網站将在規定時間内給予删除等相關處理.

猜你喜歡

海能達發布全新專業防爆PDT對講機CH690Ex

随着我國應急管理體系持續完善,消防救援任務正在從傳統火災處置,向化工園區事故、危險品洩漏、地下空間救援、大型綜合災害等多風險、多場景方向發展。在這些複雜環境中,救援現場往往面臨爆炸性氣體、可燃性粉塵、

2周前

海能達CCW 2026載譽收官:AI與融合通信引領專用通信新未來

6月16日至18日,2026年全球關鍵通信展(CCW2026)在英國倫敦舉行。展會期間,海能達集中展示了從終端到系統、從感知到決策的全鍊路創新版圖,AI與融合通信産品及解決方案貫穿三天展期,持續獲得高

4周前

登陸歐洲 Intersolar!遠景AI電力系統支撐全球 AI 算力發展

慕尼黑,2026年6月23日——在IntersolarEurope2026上,遠景科技集團發布面向AI數據中心的下一代電力基礎設施——融合風光儲一體化方案、固态變壓器(SST)、800V直流供電、儲能

4周前

海能達六度問鼎ICCAs,PDC650與西安機場方案摘得雙獎

6月17日,2026年國際關鍵通信獎(InternationalCriticalCommunicationsAwards,ICCAs)在英國倫敦舉行的全球關鍵通信展(CCW2026)期間正式揭曉。海能

4周前

海能達即将亮相2026年CCW全球關鍵通信展: 攜AI與融合通信解決方案登陸倫敦

6月16日至18日,2026年CCW全球關鍵通信展将在英國倫敦啟幕。作為全球領先的專用通信解決方案提供商,海能達将以全場景關鍵通信産品矩陣亮相F25展位,集中展示面向公共安全、應急救援、城市治理等領域

1個月前

海能達再獲第十一屆廣東專利獎:持續自主創新,構築專用通信知識産權高地

近日,廣東省市場監督管理局正式公示第十一屆廣東專利獎評選結果。海能達通信股份有限公司申報的“一種集群通信系統的組派接方法、通信系統及存儲介質”(專利号:ZL201811296617.7)榮獲廣東專利優

1個月前