騰訊雲端發表自研大數據高效能運算引擎Meson,效能最高提升6倍

WBOY
發布: 2024-07-15 14:38:20
原創
399 人瀏覽過

騰訊雲端發表自研大數據高效能運算引擎Meson,效能最高提升6倍

7月4日訊息,騰訊雲端發布全新自研大數據高效能運算引擎Meson。

Meson透過軟硬一體加速和智慧技術的綜合應用,能顯著為AI等場景下的大數據任務提供更優的運算效能,並節省更多運算資源。

例如,在資料湖場景下,Meson能夠協助單一資料查詢分析提速6倍,在微信閱讀「AI問書」專案中,Meson助力大數據任務節省了9成的資源消耗。

目前,Meson已登陸騰訊雲端資料湖、搜尋分析服務、雲端資料倉儲三大業務線,作為統一的運算加速底座,為企業大數據業務提供加速服務。

在大數據領域,資料儲存和運算是至關重要的核心環節,針對運算和儲存的效能提升一直是大數據技術攻堅的核心任務。

騰訊雲大數據高效能運算引擎Meson在多個方面作出加速優化:

  • 軟體層的向量化運算、JIT Compilation等一系列軟體加速工程
  • 硬體層的GPU及FPGA加速
  • 基於智慧查詢最佳化、負載智慧預測等智慧技術,讓大數據分析可以根據過往的經驗,自動調整處理策略,讓資料處理更有效率。

海量資料的處理與分析率先體驗到Meson帶來的效能提升。

以儲存海量資料的資料湖而言,騰訊雲基於Meson實現了完全相容Spark的向量化運算能力,能在處理大規模資料時發揮更高的效能。

在搜尋分析的高頻需求中,騰訊雲Elasticsearch Service (簡稱ES)結合Meson解決方案,成為全球首個支援GPU加速的ES服務,顯著提高了ES向量產生和向量檢索的效率。

對於企業級資料倉儲TCHouse 來說,Meson透過採用查詢最佳化技術、向量化運算模式及AI智慧資源調度等技術手段,可大幅提升海量資料分析的效率與品質。

截至目前,騰訊雲大數據已持續為超1000家中大型客戶建構國產大數據平台,涵蓋能源、製造、電力等多個領域,如國家電網、中國商飛、三一重工、陝西建工等各行業頭部客戶。

以上是騰訊雲端發表自研大數據高效能運算引擎Meson,效能最高提升6倍的詳細內容。更多資訊請關注PHP中文網其他相關文章!

相關標籤:
來源:jiqizhixin.com
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
最新問題
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板