騰訊雲端發表自研大數據高效能運算引擎Meson，效能最高提升6倍

7月4日訊息，騰訊雲端發布全新自研大數據高效能運算引擎Meson。

Meson透過軟硬一體加速和智慧技術的綜合應用，能顯著為AI等場景下的大數據任務提供更優的運算效能，並節省更多運算資源。

例如，在資料湖場景下，Meson能夠協助單一資料查詢分析提速6倍，在微信閱讀「AI問書」專案中，Meson助力大數據任務節省了9成的資源消耗。

目前，Meson已登陸騰訊雲端資料湖、搜尋分析服務、雲端資料倉儲三大業務線，作為統一的運算加速底座，為企業大數據業務提供加速服務。

在大數據領域，資料儲存和運算是至關重要的核心環節，針對運算和儲存的效能提升一直是大數據技術攻堅的核心任務。

騰訊雲大數據高效能運算引擎Meson在多個方面作出加速優化：

• 軟體層的向量化運算、JIT Compilation等一系列軟體加速工程
• 硬體層的GPU及FPGA加速
• 基於智慧查詢最佳化、負載智慧預測等智慧技術，讓大數據分析可以根據過往的經驗，自動調整處理策略，讓資料處理更有效率。

海量資料的處理與分析率先體驗到Meson帶來的效能提升。

以儲存海量資料的資料湖而言，騰訊雲基於Meson實現了完全相容Spark的向量化運算能力，能在處理大規模資料時發揮更高的效能。

在搜尋分析的高頻需求中，騰訊雲Elasticsearch Service （簡稱ES）結合Meson解決方案，成為全球首個支援GPU加速的ES服務，顯著提高了ES向量產生和向量檢索的效率。

對於企業級資料倉儲TCHouse 來說，Meson透過採用查詢最佳化技術、向量化運算模式及AI智慧資源調度等技術手段，可大幅提升海量資料分析的效率與品質。

截至目前，騰訊雲大數據已持續為超1000家中大型客戶建構國產大數據平台，涵蓋能源、製造、電力等多個領域，如國家電網、中國商飛、三一重工、陝西建工等各行業頭部客戶。

以上是騰訊雲端發表自研大數據高效能運算引擎Meson，效能最高提升6倍的詳細內容。更多資訊請關注PHP中文網其他相關文章！