Meson透過軟硬一體加速和智慧技術的綜合應用,能顯著為AI等場景下的大數據任務提供更優的運算效能,並節省更多運算資源。
例如,在資料湖場景下,Meson能夠協助單一資料查詢分析提速6倍,在微信閱讀「AI問書」專案中,Meson助力大數據任務節省了9成的資源消耗。
目前,Meson已登陸騰訊雲端資料湖、搜尋分析服務、雲端資料倉儲三大業務線,作為統一的運算加速底座,為企業大數據業務提供加速服務。
在大數據領域,資料儲存和運算是至關重要的核心環節,針對運算和儲存的效能提升一直是大數據技術攻堅的核心任務。
騰訊雲大數據高效能運算引擎Meson在多個方面作出加速優化:
海量資料的處理與分析率先體驗到Meson帶來的效能提升。
以儲存海量資料的資料湖而言,騰訊雲基於Meson實現了完全相容Spark的向量化運算能力,能在處理大規模資料時發揮更高的效能。
在搜尋分析的高頻需求中,騰訊雲Elasticsearch Service (簡稱ES)結合Meson解決方案,成為全球首個支援GPU加速的ES服務,顯著提高了ES向量產生和向量檢索的效率。
對於企業級資料倉儲TCHouse 來說,Meson透過採用查詢最佳化技術、向量化運算模式及AI智慧資源調度等技術手段,可大幅提升海量資料分析的效率與品質。
截至目前,騰訊雲大數據已持續為超1000家中大型客戶建構國產大數據平台,涵蓋能源、製造、電力等多個領域,如國家電網、中國商飛、三一重工、陝西建工等各行業頭部客戶。
以上是騰訊雲端發表自研大數據高效能運算引擎Meson,效能最高提升6倍的詳細內容。更多資訊請關注PHP中文網其他相關文章!