如今,企業的數字化轉型和智能升級必談AI,AI在人們日常生活中的産品和應用也随處可見,如智能音箱、AI相機、人臉支付等。但是,爆炸式增長的數據量、複雜的訓練框架和算法,讓很多企業現有的AI計算平台變得捉襟見肘:計算效率無法滿足業務增加訴求,運營運維成本也居高不下。華為雲AI容器為客戶提供更高性價比的算力,更簡化了平台運維,提升AI計算效率50%,加速了AI計算在各行業的落地和發展。
計算量6年增長30萬倍, AI平台 擴容成本高
OpenAI分析報告顯示,從2012至2018年的6年時間,AI訓練使用的算力增長了30萬倍,是同時期摩爾定律增長量的5倍。這意味着,要保持計算速度不變,不能單單依靠芯片能力的升級,還必須增加計算設備投入。而專業GPU服務器配以高速網絡、高速存儲等設備,單台平均成本在100萬左右,價格高昂,大部分企業難以承擔。

系統日趨複雜, AI平台 運維難度激增
首先,不同的業務需要不同的AI訓練框架、模型、加速庫,如何在統一平台上管理不同的訓練框架和模型,如何将線下訓練快速部署到生産環境帶來巨大挑戰。
其次,AI訓練和公司業務使用不同的資源管理工具,使得運維團隊需要掌握和使用多種資源管理工具,保障GPU利用率,增加運維複雜度。
再者,GPU在集群内被不同業務團隊共享,團隊間的資源協調也會耗費不少精力。

公有雲 +容器化:A I計算 平台建設的必選之路
面對上述問題,各企業開始着手構建基于公有雲和容器的AI計算平台,基于公有雲的容器平台,能給客戶帶來什麼樣的好處呢?
更快速的獲取算力資源
面對AI計算需要的超大規模算力,自建IDC擴容周期長、一次性投入大,後期維護成本高,采用公有雲,可以即申請即用,快速補充企業IDC算力的不足,同時具備更低的使用成本、無需關注基礎設施維護、避免資源閑置造成浪費等優勢,成為了客戶擴充算力的選擇。
降低日常使用和運維難度
用戶搭建深度學習訓練環境,需要準備帶GPU的機器、安裝Python、TensorFlow、GPU驅動等,如果要從開發環境到測試環境,再從測試環境到生成環境,涉及環境遷移過程中需要花很大精力來保證環境的一緻性。
容器帶來的标準化打包能力可以提供了的解決方案,将相關軟件一并打包到鏡像中,一次構建,即可在不同平台上運行,極大降低安裝、部署的複雜度;同時各容器間相互隔離,可實現多訓練框架并存,而且每一個框架都可以獨立進行升級而不會影響其他業務,降低的日常運維的難度,讓客戶可以将更多的精力集中在AI訓練上。
但是,我們在與用戶交流過程中發現,用戶雖然認可公有雲+容器的模式,但是在公有雲上自建一套容器化的AI計算平台,對部分用戶仍存在較大的技術門檻,尤其是那些尚未接觸過容器的用戶。華為雲就此推出了面向AI計算場景的容器服務——AI容器,并于2018年在華為全聯接大會發布,今年我們對AI容器進行了升級,在性能、易用性、可運維等方面都有了很大的提升。
華為雲A I容器: 更易使用和運維,提升A I計算效率 5 0%
開箱即用免除基礎設施運維
AI容器采用華為雲容器實例(CCI)作為基礎設施層,得益于CCI的Serverless架構,用戶完全無需關心主機的創建、管理、運維,而隻需要在使用時申請所需要的算力資源即可(算力類型、CPU核數、内存量),省去了基礎設施的日常運維工作,用戶可以更加專注于AI計算本身。
高效調度,快速獲取海量算力
AI容器基于全新的Volcano平台進行任務調度管理,Volcano是華為雲高性能批量計算平台,具有更高的調度性能,可達1000容器/秒,将算力獲取的效率提升近10倍。
同時,有了Volcano的加持,AI容器還可以基于拓撲和資源親和進行任務調度,根據策略将關聯任務調度到同一物理節點或二層網絡内,極大的提升了AI訓練過程中任務間通信及數據交互的效率。
秒級計費 ,資源性價比更高
AI訓練時客戶需要快速、多次計算進行疊代,會對資源進行頻繁的申請、釋放,AI容器采用按秒計費和套餐包的計費方式,真正做到按使用付費(PAYU),避免客戶采用包周期等方式購買資源後,利用率不足而造成的浪費。
開放生态 支持主流訓練框架
随着AI平台容器化的深入,大量訓練框架都已發布其容器版本,AI容器目前已支持Tensorflow, Caffe, Mxnet, Pytorch, MindSpore等近十種主流訓練框架,用戶可以将訓練代碼平滑的遷移上雲。
多樣算力 用戶選擇更加靈活
AI容器的能提供昇騰、鲲鵬、x86和GPU等類型的算力資源,用戶可以實現一套平台運行不同類型的應用,根據應用特點靈活選擇算力資源,達到資源的配置。
華為雲AI容器服務現已全面開放,歡迎體驗。
免責聲明:本文僅代表作者個人觀點,與每日科技網無關。其原創性以及文中陳述文字和内容未經本站證實,對本文以及其中全部或者部分内容、文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關内容。
本網站有部分内容均轉載自其它媒體,轉載目的在于傳遞更多信息,并不代表本網贊同其觀點和對其真實性負責,若因作品内容、知識産權、版權和其他問題,請及時提供相關證明等材料并與我們聯系,本網站将在規定時間内給予删除等相關處理.

