近期,由 SelectDB 主辦,百度智能雲、騰訊雲聯合舉辦的 Apache Doris 社區首屆峰會 Doris Summit 2022 圓滿落下帷幕。本次峰會以 Select Future From Doris 為主題,彙聚了來自 SelectDB、百度、騰訊、美團、小米、京東、字節跳動、阿裡雲、亞馬遜雲科技、網易、知乎、鬥魚、馬上消費金融、易觀、韻達、360 等行業領軍企業的 40 餘位數據專家。在為期兩天的在線峰會上,衆多專家共同探讨了業界最前沿數據分析技術的演進趨勢以及數字化時代數據分析平台建設的實踐,為參會的數萬名大數據領域開發者奉上了一份精彩的技術盛宴。
全球大數據和數據庫領域最活躍的開源社區之一
本次峰會在 Apache 基金會 2022 年董事姜甯的開場緻辭中正式拉開序幕,Apache Doris PMC 主席陳明雨以 《New Journey of Apache Doris》 為題,詳細回顧了過去一年 Apache Doris 社區所取得的成績 —— 累計貢獻者規模超過 420 位、同比增長超過 ,每月活躍貢獻者增長至 100 位、同樣呈翻倍增長的趨勢,GitHub Star 數量從 3.6k 增長至 7.6k,多次登上 GitHub Trending 榜單、受到全球開發者的關注……從多個社區活躍度指标看,Apache Doris 已經成為全球大數據和數據庫領域最為活躍的開源社區之一!
“另外在 2022 年 6 月, Apache Doris 迎來了開源以來最重要的裡程碑之一,正式從 Apache 孵化器畢業、成為了 Apache 項目”,陳明雨說到,“ 所有取得的成就,都離不開社區所有開發者與用戶的支持,也正是因為有了他們的貢獻,才使得 Apache Doris 有如此快的發展,未來 Apache Doris 也會回饋所有用戶以的數據分析體驗。”
2022,更快、更實時、更統一
在主論壇的主題分享環節,來自 SelectDB、百度、美團、字節跳動等多家企業的社區核心貢獻者帶來了 Apache Doris 在性能和功能上的優化創新及取得的成效。
性能方面,SelectDB CTO 衣國壘介紹到:“通過向量化執行、内存管理優化、自适應字典計算、Global Runtime Filter 等一系列查詢優化手段,Apache Doris 在單表場景斬獲 Clickbench 全球數據庫性能榜單前三的優異成績,多表關聯場景在 SSB 和 TPC-H 等标準測試數據集有數倍乃至數十倍的性能提升,跻身全球數據庫性能最前列!”
功能方面,來自 SelectDB、美團、字節跳動、百度的多位技術專家介紹了全新 Unqiue Key 主鍵模型、全新查詢優化器、數據湖聯邦分析、半結構化數據分析以及多表物化視圖等核心特性的研發進展,同時分享了社區在版本發布和代碼質量保障方面的思考。這一系列工作使得 Apache Doris 在實時性、穩定性和易用性等多方面得到全面進化,同時也具備了更多數據分析場景的适應性,開始邁入極速實時統一的數據分析時代。
來自各行業用戶最真實的聲音
社區用戶方面,在過去一年,Apache Doris 也收獲到了更多開發者的認可,有越來越多的企業基于 Apache Doris 構建全新的數據分析平台架構。
“經過統計,在全球範圍内 Apache Doris 的企業用戶規模已經超過了 1000 家、被廣泛應用于數十個行業中,成為最受人們認可的 OLAP 數據庫之一!”陳明雨補充道,“同時 Apache Doris 社區已經聚集了數萬人的用戶社群,社區成立了一隻專職的工程師團隊在社群中為所有用戶答疑解惑,同時也有許多開發者在社群中交流使用心得和分享實踐經驗,讓更多技術愛好者有了一個自由交流數據庫知識和提升技術水平的平台。”
在此次峰會的行業實踐論壇中,美團、京東、小米、騰訊音樂、360、馬上消費金融、杭銀消金、鬥魚、知乎、韻達、易觀、同程數科等行業領軍企業的多名參會專家,紛紛介紹了 Apache Doris 在企業内部大規模落地應用的實踐經驗,并深度解讀了 Apache Doris 如何幫助企業實現降本增效。
在縱騰集團的案例分享中,Apache Doris 已經助力縱騰集團快速構建起一個全新的流批一體數倉架構,單日實時入庫數據量可達上億規模,同時支持上百個調度任務平穩運行,解決了随數據增長而日益複雜的業務需求。 在騰訊音樂的案例分享中,Apache Doris 助力騰訊音樂内容數據平台在百萬分群圈選場景中實現了近 20 倍的性能提升,同時在存儲和開發維護上降低了 40%以上的投入成本。在慧策的案例分享中,通過 Apache Doris 替代了原有的 Clickhouse,不僅極大提升了ETL效率,還極大降低了存儲成本、存儲空間僅原先40%不到。在美團的案例分享中,Apache Doris 已成為美團内部統一的OLAP引擎,支持外賣、買菜、優選等十餘業務線,集群規模超百個、總機器規模數千台。在馬上消費金融的案例分享中,基于 Apache Doris 全新的實時數倉架構極大提升了數據時效性,從數據生産至數據應用,整個數據處理鍊路時延不超過1分鐘。在杭銀消金的案例分享中,利用 Apache Doris 1.2 版本的數據湖分析功能,實現對ES/Hive等多種異構數據源的統一分析,并極大提升了查詢性能,降低資源消耗的同時使系統穩定性進一步提升。在鬥魚的案例分享中,Apache Doris 解決了過去煙囪式開發和繁重架構帶來的難運維問題,并實現标簽圈選時間分鐘級至秒級的進化,實時标簽任務穩定性的同時産出時間也提升了40%。
除以上所摘選内容外,還有更多技術專家把自身真實業務場景的需求與實踐沉澱成寶貴的經驗,在峰會上分享給所有參會的開發者。
豐富的數據上下遊與商業生态
數據生态同樣是 Apache Doris 社區重點建設的方向。在商業與數據生态論壇上,來自 Apache DolphinScheduler PMC、Apache Kyuubi 、Apache Inlong、Dinky 社區、ClouGence 等開源社區及企業的多名技術專家為大家帶來了數據分析與處理鍊路的深入思考,并解讀了如何結合 Apache Doris 構建對用戶體驗更加的數據分析解決方案。
開源項目的成功離不開商業化力量的支持,如何通過企業級特性的增強為客戶提供具備差異性價值的服務,以及如何将開源技術和雲原生更好地結合、構建具有競争力和影響力的産品和解決方案,同樣是本次峰會的亮點。在商業與數據生态論壇上,來自 SelectDB 的技術副總裁楊勇強在峰會上介紹了基于 Apache Doris 内核打造的雲原生實時數據倉庫 SelectDB Cloud,采用完全存算分離的架構設計,是國内實現多雲中立、全托管且 SaaS 化的雲數據倉庫。
此外 百度智能雲、騰訊雲以及火山引擎等國内一線雲廠商分别介紹了基于 Apache Doris 打造的雲數據倉庫服務,可以快速助力企業建極速易用的雲上數據分析平台。
全新定位,極速、易用、實時、統一的多模分析型數據庫
在本次峰會上,Apache Doris PMC 陳明雨還代表社區發布了全新定位,并公布了社區 2023 年的研發計劃。
“如果說過去 Apache Doris 更多是服務于在線報表場景和 Ad-hoc 分析的 OLAP 引擎的話,那麼在所有社區和開發者的努力下,當前 Apache Doris 已經具備了更為廣闊的定位,即極速、易用、實時、統一的多模分析型數據庫。”陳明雨說道,“這其中的統一,既包含了架構的統一、也包含了業務和數據的統一。用戶可以通過 Apache Doris 構建多種不同場景的數據分析服務、同時支撐在線與離線的業務負載、高吞吐的交互式分析與高并發的點查詢;通過一套架構實現湖和倉的統一、在數據湖和多種異構存儲之上提供無縫且極速的分析服務;也可通過對日志/文本等半結構化乃至非結構化的多模數據進行統一管理和分析、來滿足更多樣化數據分析的需求。這是我們希望 Apache Doris 能夠帶給用戶的價值,不再讓用戶在多套系統之間權衡,僅通過一個系統解決絕大部分問題,降低複雜技術棧帶來的開發、運維和使用成本,化提升生産力。”
在2023 年,Apache Doris 社區将開啟更多有意義的工作,全年的研發計劃主要會圍繞高性能、高性價比、混合負載分析、多模态數據分析、湖倉一體、實時性以及易用性與穩定性等方向展開,将回饋所有用戶以更佳的數據分析體驗,緻力于成為全球OLAP 數據庫的新标杆。
至此,Doris Summit 2022 社區首屆峰會圓滿收官! 峰會的順利舉行,要特别感謝參與本次峰會分享的 40 餘位技術專家以及 10 餘位議題評審委員會專家,為所有社區用戶、開發者、數據庫技術從業者以及全體熱愛開源的人士帶來了一場如此精彩的技術盛宴,同樣也要感謝所有參與本次峰會的合作夥伴以及工作人員。
2023 年是 Apache Doris 全新征程的開始,在未來的日子裡,Apache Doris 必将本着為人們解決數據分析問題的初心,繼續砥砺前行。相信在所有社區用戶和開發者的幫助下, Apache Doris 會在更多的行業中和場景中得到更深度的應用。也期待 Apache Doris 走向全球,為更多不同地域的人解決數據分析難題,代表中國開源力量在全球舞台閃耀!
# 關于主辦方
SelectDB 是 Doris Summit 2022 的主辦方,也是 Apache Doris 背後的商業化公司。SelectDB 緻力于為 Apache Doris 社區提供一個由全職工程師、産品經理和支持工程師組成的團隊,繁榮開源社區生态,打造實時分析型數據庫領域的國際工業界标準。基于 Apache Doris 研發的新一代雲原生實時數倉 SelectDB,運行于多家雲上,為用戶和客戶提供開箱即用的能力。
免責聲明：本文僅代表作者個人觀點，與每日科技網無關。其原創性以及文中陳述文字和内容未經本站證實，對本文以及其中全部或者部分内容、文字的真實性、完整性、及時性本站不作任何保證或承諾，請讀者僅作參考，并請自行核實相關内容。
本網站有部分内容均轉載自其它媒體，轉載目的在于傳遞更多信息，并不代表本網贊同其觀點和對其真實性負責，若因作品内容、知識産權、版權和其他問題，請及時提供相關證明等材料并與我們聯系，本網站将在規定時間内給予删除等相關處理.
