Tencent Cloud, 자체 개발한 빅데이터 고성능 컴퓨팅 엔진 Meson 출시, 성능 최대 6배 향상

WBOY
풀어 주다: 2024-07-15 14:38:20
원래의
399명이 탐색했습니다.

Tencent Cloud, 자체 개발한 빅데이터 고성능 컴퓨팅 엔진 Meson 출시, 성능 최대 6배 향상

7월 4일, Tencent Cloud는 자체 개발한 새로운 빅데이터 고성능 컴퓨팅 엔진 Meson을 출시했습니다.

Meson은 소프트웨어 및 하드웨어 가속과 지능형 기술의 통합 적용을 통해 AI 및 기타 시나리오의 빅 데이터 작업을 위해 더 나은 컴퓨팅 성능을 크게 제공하고 더 많은 컴퓨팅 리소스를 절약할 수 있습니다.

예를 들어, 데이터 레이크 시나리오에서 Meson은 WeChat Reading "AI Book Questioning" 프로젝트에서 단일 데이터 쿼리 및 분석 속도를 6배 향상시키는 데 도움을 줄 수 있으며 빅 데이터 작업에서 리소스 소비를 90% 절약할 수 있습니다.

현재 Meson은 Tencent Cloud 데이터 레이크, 검색 분석 서비스, 클라우드 데이터 웨어하우스의 세 가지 주요 사업 라인에서 통합 컴퓨팅 가속 기반으로 기업 빅 데이터 비즈니스를 위한 가속 서비스를 제공하고 있습니다.

빅데이터 분야에서 데이터 저장과 컴퓨팅은 중요한 핵심 연결고리입니다. 컴퓨팅과 스토리지의 성능을 향상시키는 것은 언제나 빅데이터 기술의 핵심 과제였습니다.

Tencent Cloud 빅 데이터 고성능 컴퓨팅 엔진 Meson은 여러 측면에서 가속 최적화를 수행했습니다.

  • 소프트웨어 계층의 벡터화된 계산 및 JIT 컴파일과 같은 일련의 소프트웨어 가속 프로젝트
  • 하드웨어 계층의 GPU 및 FPGA 가속
  • 지능 기반 쿼리 최적화, 지능형 부하 예측 등의 지능형 기술을 통해 빅데이터 분석을 통해 과거 경험을 바탕으로 처리 전략을 자동으로 조정하여 데이터 처리 효율성을 높일 수 있습니다.

대량 데이터의 처리와 분석은 Meson이 가져온 성능 향상을 가장 먼저 경험해 볼 수 있습니다.

대량의 데이터를 저장하는 데이터 레이크 측면에서 Tencent Cloud는 Meson 기반 Spark와 완벽하게 호환되는 벡터화된 컴퓨팅 기능을 구현하여 대규모 데이터를 처리할 때 더 높은 성능을 달성할 수 있습니다.

검색 분석에 대한 수요가 급증하는 가운데, Tencent Cloud Elasticsearch Service(ES)는 Meson 솔루션과 결합하여 GPU 가속을 지원하는 세계 최초의 ES 서비스가 되었으며, ES 벡터 생성 및 벡터 검색의 효율성을 크게 향상시켰습니다.

엔터프라이즈급 데이터 웨어하우스 TCHouse의 경우 Meson은 쿼리 최적화 기술, 벡터화된 컴퓨팅 모드, AI 지능형 리소스 스케줄링 및 기타 기술적 수단을 사용하여 대규모 데이터 분석의 효율성과 품질을 크게 향상시킬 수 있습니다.

지금까지 Tencent Cloud 빅 데이터는 State Grid, COMAC, Sany Heavy Industry, Shaanxi Construction Engineering 등 에너지, 제조, 전력 및 기타 분야를 포괄하는 1,000개 이상의 중대형 고객을 대상으로 국내 빅 데이터 플랫폼을 지속적으로 구축해 왔습니다. , 등 다양한 산업 분야의 최고 고객입니다.

위 내용은 Tencent Cloud, 자체 개발한 빅데이터 고성능 컴퓨팅 엔진 Meson 출시, 성능 최대 6배 향상의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

관련 라벨:
원천:jiqizhixin.com
본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
최신 이슈
인기 튜토리얼
더>
최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿