華為雲CTO張宇昕首次解密:從毫秒進入微秒時代的華為雲存儲為何越用越快

2023-03-14 11:03:31 來源:中華網
        【每日科技網】

  《人類簡史》談到,人類與衆不同之處就是可以在心裡構築一個世界,然後在現實世界裡面創造出來。今天華為正在為人類進入智能時代,構築一個全新的雲基石。

  當大家都在提智能的時候,華為雲想到的卻是當前數據架構是否能支撐起萬物互聯的智能世界?比如支撐整個數據流動的底座,雲計算是否需要進化?比如今天的雲存儲是否能夠滿足智能時代海量數據的交互?

  華為雲給出的答案是:制約雲計算為智能時代更好地服務的瓶頸就在“最後一公裡”。在雲端,“最後一公裡”即指數據通過服務端軟件、網絡、存儲服務器,最終抵達介質的這一過程。

  “最後一公裡”的挑戰,也是指随着人工智能(AI)、VR/AR、5G、自動駕駛等技術和應用的發展,雲存儲面臨着海量數據存儲、數據實時性、以及智能應用等挑戰。

  圍繞着“最後一公裡”的挑戰,華為雲日前在成都發布了雲存儲All-Flash戰略,力在推動雲存儲從毫秒走向微秒時代,同時還推出了該戰略的落地産品——全新一代極速IO雲硬盤。

  那麼圍繞雲計算“最後一公裡”瓶頸,華為雲存儲如何實現微秒實時處理?又如何通過AI來實現數據利用越來越快。至頂網采訪了華為雲CTO張宇昕。

  張宇昕表示,随着人工智能(AI)、VR/AR、5G、自動駕駛等技術的發展,應用對雲存儲的實時處理能力提出了更高标準。對于支撐智能世界的數據平台而言,需要進入百微秒量級,才能滿足實時性要求。

  進入微秒時代,華為雲有哪些黑科技?

  在數據中心裡面,影響數據時延的原因主要來自兩個層面,一個是經過整個網絡傳輸時延,一個是存儲本身介質的時延。目前這兩個層面的時延都是毫秒級,這樣情況下的5G應用、自動駕駛、AI等應用很難做到實時處理,如果要進入微秒時代,必須把這兩段時延的瓶頸都打破。

  張宇昕分享了華為雲解決數據實時處理難題的黑科技。

  張宇昕表示,首先,為了實現這“最後一公裡”的百微秒級突破,平均時延達4毫秒的機械硬盤(7200轉)成為了第一個被優化的對象。相比機械硬盤,Flash介質具有更強的性能和20μs的極低時延。同時華為雲圍繞介質上的能力,全新設計了先進的存儲引擎,既充分釋放介質的能力,降低時延和提升性能,又提高了存儲介質的可靠性和增強了使用壽命。

  “第二,我們通過軟硬件架構和數據中心架構的優化,實現了極簡網絡,也實現了多核免鎖并發,使得軟件的時延和網絡的時延也降到了極低,所以整個數據處理IO從進來到出去,我們能實現50μs -100μs的穩定時延。” 張宇昕談到。

  第三,華為公司有一個很強的優勢就是芯片,目前全系列自研芯片從“算、傳、存、智”四個維度來增強數據處理全流程。芯片與架構的緊密配合,充分發揮了鲲鵬CPU在多核、低功耗等方面的優勢;通過高性能智能網卡芯片、SSD存儲控制芯片實現了數據的直接訪問;結合昇騰AI芯片,讓全棧軟硬件聯動創新,并實現雲存儲在芯片級的深度定制優化;實現通過網絡芯片和SSD 存儲卡控制芯片,把整個IO路徑重構,做到極低時延。

  當然說了這麼多,個人第一感覺還是算法的重要性,不管是控制器、軟件也好,芯片也好,裡面很多核心技術其實都涉及算法,算法需要長期的積累,才能不斷地逼近能力極限。華為雲的優勢就是把這些能力綜合起來,做到了數據的實時處理。

  存儲越用越快?我們從當下的數據“越用越慢”談起

  在發布會上,張宇昕談到華為雲創新的技術讓存儲越用越快,引起了筆者的好奇心。大家知道不管是手機,還是電腦,用的時間越久,速度越慢。那麼華為雲是如何實現數據存儲越來越快的呢?

  首先我們來看一下當前的數據存儲越用越慢的情況。随着數據的增加,存儲介質碎片增多,包括企業的數據中心到雲數據中心。随着時間地推移,用戶訪問數據越來越慢。造成這種原因很大程度上就是由于數據在數據中心的布局以及數據存儲所提供IO能力跟企業業務要求不匹配。當數據量大,租戶越來越多,相互之間也可能資源有争搶的,那這種情況就會加劇。

  目前,華為雲存儲将人工智能技術融入分布式存儲的全生命周期,智能識别用戶業務模型,實現存儲平台的自主調優和自我進化,讓應用越用越快。華為雲AI預測能力,可預判30天性能趨勢,提前14天發現故障盤并自動隔離。AI控制的引入,可智能預測用戶性能趨勢,并根據用戶提前配置的自動擴容等策略完成調整,免人工幹預保障業務平穩。經過全局的數據進行優化,化地讓全局的資源得到充分利用。

  所以從客戶的感受來講,随着這種學習的深入,訓練數目的增加,訓練精度的提升,AI會越來越了解客戶,讓系統自動感知,而不是通過人工幹預,可以做到快速系統調整來響應客戶的需求。

  華為雲明确了以“全閃存、全系列、+智能、全棧創新”為導向的All-Flash戰略布局,讓AI加持的雲存儲逼近介質的極限,帶領全系列存儲逐步完成全閃存進化,帶領雲存儲由機械時代邁入電子時代。而本次基于All-Flash戰略推出的極速IO雲硬盤,其時延低至50~100μs,并具有4GB/s帶寬和高達100萬IOPS性能,可滿足結構化數據庫、半結構化數據庫和ELK分布式日志應用以及流處理等場景對性能的要求,也是主流雲廠商中進入百微秒以内的雲硬盤。

免責聲明:本文僅代表作者個人觀點,與每日科技網無關。其原創性以及文中陳述文字和内容未經本站證實,對本文以及其中全部或者部分内容、文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關内容。
    本網站有部分内容均轉載自其它媒體,轉載目的在于傳遞更多信息,并不代表本網贊同其觀點和對其真實性負責,若因作品内容、知識産權、版權和其他問題,請及時提供相關證明等材料并與我們聯系,本網站将在規定時間内給予删除等相關處理.

猜你喜歡

海能達發布全新專業防爆PDT對講機CH690Ex

随着我國應急管理體系持續完善,消防救援任務正在從傳統火災處置,向化工園區事故、危險品洩漏、地下空間救援、大型綜合災害等多風險、多場景方向發展。在這些複雜環境中,救援現場往往面臨爆炸性氣體、可燃性粉塵、

2周前

海能達CCW 2026載譽收官:AI與融合通信引領專用通信新未來

6月16日至18日,2026年全球關鍵通信展(CCW2026)在英國倫敦舉行。展會期間,海能達集中展示了從終端到系統、從感知到決策的全鍊路創新版圖,AI與融合通信産品及解決方案貫穿三天展期,持續獲得高

4周前

登陸歐洲 Intersolar!遠景AI電力系統支撐全球 AI 算力發展

慕尼黑,2026年6月23日——在IntersolarEurope2026上,遠景科技集團發布面向AI數據中心的下一代電力基礎設施——融合風光儲一體化方案、固态變壓器(SST)、800V直流供電、儲能

4周前

海能達六度問鼎ICCAs,PDC650與西安機場方案摘得雙獎

6月17日,2026年國際關鍵通信獎(InternationalCriticalCommunicationsAwards,ICCAs)在英國倫敦舉行的全球關鍵通信展(CCW2026)期間正式揭曉。海能

4周前

海能達即将亮相2026年CCW全球關鍵通信展: 攜AI與融合通信解決方案登陸倫敦

6月16日至18日,2026年CCW全球關鍵通信展将在英國倫敦啟幕。作為全球領先的專用通信解決方案提供商,海能達将以全場景關鍵通信産品矩陣亮相F25展位,集中展示面向公共安全、應急救援、城市治理等領域

1個月前

海能達再獲第十一屆廣東專利獎:持續自主創新,構築專用通信知識産權高地

近日,廣東省市場監督管理局正式公示第十一屆廣東專利獎評選結果。海能達通信股份有限公司申報的“一種集群通信系統的組派接方法、通信系統及存儲介質”(專利号:ZL201811296617.7)榮獲廣東專利優

1個月前