알리다! ChatGPT의 폭발적인 증가로 인한 에너지 소비 위기는 데이터 센터 운영자에게 큰 과제를 안겨줍니다.
최근 미국 회사 OpenAI가 소유한 지능형 채팅 도구인 ChatGPT는 소셜 미디어를 강타하여 100억 달러 이상의 투자를 유치하고 자본 시장에서 인공 지능 애플리케이션에 대한 엄청난 열풍을 몰고 왔으며, 한동안 주목을 받았습니다.
Microsoft는 처음으로 OpenAI에 100억 달러 투자를 발표했고, 이후 Amazon과 미국 버전의 "Today's Toutiao" BuzzFeed는 동시에 일상 업무에서 ChatGPT를 활성화하겠다고 발표했습니다. 또한 3월에 ChatGPT의 '중국어 버전'을 출시할 것이라고 발표했습니다. 많은 기술 회사가 화재에 연료를 추가한 후 ChatGPT는 즉시 전 세계의 관심을 끌었습니다.
데이터에 따르면 Amazon에서 배포하는 로봇의 수가 급속히 증가하고 있으며 일일 증가량은 약 1,000대에 달합니다. 또 페이스북 모회사인 메타도 2023년 데이터센터에 40억~50억 달러를 추가로 투자할 계획인데, 이 모두가 인공지능에 활용될 것으로 예상된다. IBM CEO 크리슈나(Krishna)는 인공지능이 2030년까지 세계 경제에 16조 달러를 기여할 것으로 예상한다고 말했다.
ChatGPT의 인기에 힘입어 2023년에는 거인들이 인공지능 분야에서 새로운 치열한 전투를 시작할 수도 있습니다.
그러나 ChatGPT-3는 다음 단어를 예측할 때 여러 추론 계산을 수행해야 하므로 많은 리소스를 차지하고 더 많은 전력을 소비합니다. 클라우드 컴퓨팅, 비디오 스트리밍 및 5G 네트워크의 폭발적인 성장을 지원하기 위해 데이터 센터 인프라가 확장됨에 따라 GPU 및 CPU 아키텍처는 임박한 컴퓨팅 요구 사항을 충족하기 위해 효율적으로 작동할 수 없으며 이는 대규모 데이터 센터 운영자에게 큰 문제를 야기합니다.
GPT3.5 교육은 10,000개의 V100 GPU로 구성된 고성능 네트워크 클러스터인 Microsoft의 특별히 구축된 AI 컴퓨팅 시스템을 사용하며, 총 컴퓨팅 전력 소비량은 약 3640PF-일입니다(즉, 1000조를 계산할 경우). 두 번째 경우에는 3640일을 계산해야 합니다.) 이러한 대규모 및 장기 GPU 클러스터 훈련 작업은 네트워크 상호 연결 기반의 성능, 안정성, 비용 및 기타 측면에 대한 극단적인 요구 사항을 제시합니다.
예를 들어 Meta는 전 세계 데이터 센터 확장을 중단하고 인공 지능의 데이터 처리 요구 사항을 충족하기 위해 이러한 서버 팜을 재구성하겠다고 발표했습니다.
인공 지능 플랫폼의 데이터 처리 요구 사항은 엄청납니다. ChatGPT의 OpenAI 제작자는 작년 11월에 플랫폼을 출시했으며 Microsoft의 향후 Azure 클라우드 플랫폼 업그레이드 없이는 계속 작동할 수 없습니다.
이 디지털 혁신을 지원하는 데이터 센터 인프라는 인간의 뇌처럼 두 개의 반구 또는 엽으로 구성되며, 한 엽은 다른 엽보다 훨씬 강해야 합니다. 한쪽 반구는 ChatGPT가 생성하는 샐러드라는 단어를 생성하기 위해 최대 3000억 개의 데이터 포인트를 처리하는 데 필요한 컴퓨팅 성능인 "훈련"을 제공합니다.
트레이닝 로브에는 강력한 컴퓨팅 성능과 최첨단 GPU 반도체가 필요하지만, 클라우드 컴퓨팅 서비스와 5G 네트워크를 지원하는 데이터 센터 클러스터에서는 현재 연결이 거의 필요하지 않습니다.
동시에 각 AI 플랫폼의 '훈련'에 초점을 맞춘 인프라는 막대한 전력 수요를 창출하므로 데이터 센터를 기가와트급 재생 가능 에너지 근처에 배치하고 새로운 액체 냉각 시스템을 설치하고 재설계해야 합니다. 백업 전력 및 발전기 시스템과 기타 새로운 설계 기능을 제공합니다.
인공 지능 플랫폼 뇌의 다른 반구인 "추론" 모드로 알려진 고기능 디지털 인프라는 질문이나 지침을 입력한 후 몇 초 내에 쿼리가 모델링된 데이터베이스로 처리되는 대화형 "생성" 플랫폼을 지원합니다. 설득력 있는 인간 구문으로 응답했습니다.
북미 최대 규모의 데이터 센터 클러스터와 같은 오늘날의 초연결 데이터 센터 네트워크인 반면, 북부 버지니아의 "데이터 센터"는 AI 두뇌의 "추론"에 대한 차세대 연결 요구 사항을 수용할 수 있는 가장 광범위한 광섬유 네트워크도 보유하고 있습니다. ”라고 말하지만, 이러한 시설은 필요한 엄청난 처리 용량을 충족하기 위해 업그레이드되어야 하며 변전소에 더 가까워야 합니다.
또한 연구 기관의 데이터에 따르면 데이터 센터는 세계 최대의 에너지 소비자가 되었으며, 전체 전력 소비량에서 데이터 센터의 비중은 2017년 3%에서 2025년 4.5%로 증가할 것으로 예상됩니다. 중국을 예로 들면, 전국적으로 운영되는 데이터센터의 전력 소비량은 2030년 4000억kWh를 넘어 중국 전체 전력 소비량의 4%를 차지할 것으로 예상된다.
따라서 디지털 제품이라도 개발하고 소비하려면 에너지가 필요하며 ChatGPT도 예외는 아닙니다. 2022년 11월 ChatGPT가 출시된 이후 머신러닝 작업의 추론 처리가 컴퓨팅 전력 소비의 80~90%를 차지하는 것으로 추정됩니다. 지난 30일 온라인에 접속한 이후 탄소 배출량은 814.61톤을 넘어섰다.
전문 기관의 계산에 따르면 Microsoft의 Azure 클라우드에 호스팅된 ChatGPT가 하루에 100만 건의 사용자 문의를 받는다고 가정할 때(특정 응답 시간 및 어휘에 따라 하루 약 29,167시간) A100 GPU의 최대 전력은 407W입니다. (와트) 일일 탄소 배출량은 3.82톤에 달하고 월간 탄소 배출량은 100톤을 초과합니다. 현재 ChatGPT의 일일 사용자 수는 천만 명이 넘고 실제 탄소 배출량은 월 100톤이 훨씬 넘습니다. 또한 1,750억 개의 매개변수가 포함된 대규모 언어 모델을 훈련하려면 하루 24시간 데이터를 입력하기 위해 수만 개의 CPU/GPU가 필요하며, 약 1,287MWh의 전력을 소비하고 552톤 이상의 이산화탄소를 배출합니다.
이러한 대형 언어 모델의 탄소 배출량으로 보면 ChatGPT의 전신인 GPT-3이 탄소 배출량이 가장 많습니다. 평균적인 미국인은 연간 16.4톤의 탄소를 배출하고, 평균적인 덴마크인은 연간 11톤의 탄소를 배출하는 것으로 보고됩니다. 결과적으로 ChatGPT의 모델은 덴마크인 50명이 연간 배출하는 탄소 배출량보다 더 많은 탄소를 배출하도록 훈련되었습니다.
클라우드 컴퓨팅 제공업체도 데이터 센터가 많은 양의 전기를 사용한다는 사실을 인식하고 재생 가능 에너지와 자연 냉각 조건을 활용하기 위해 북극에 데이터 센터를 구축 및 운영하는 등 효율성을 향상하기 위한 조치를 취했습니다. 그러나 이는 AI 애플리케이션의 폭발적인 성장을 충족시키기에는 충분하지 않습니다.
미국 로렌스 버클리 국립 연구소(Lawrence Berkeley National Laboratory)는 지난 20년 동안 데이터 센터 효율성의 향상이 에너지 소비 증가를 통제해 왔다는 연구 결과를 발견했지만, 연구에 따르면 현재의 에너지 효율성 조치로는 미래의 데이터 센터를 충족시키기에 충분하지 않을 수 있습니다. 필요합니다.
인공지능 산업은 이제 중요한 전환점을 맞이하고 있습니다. 생성 AI, 이미지 인식 및 데이터 분석의 기술 발전은 기계 학습의 고유한 연결과 용도를 드러내고 있지만 Gartner에 따르면 더 지속 가능한 선택이 없는 한 2025년까지 이러한 요구를 충족할 수 있는 기술 솔루션을 먼저 구축해야 합니다. , AI는 인간 활동보다 더 많은 에너지를 소비합니다.
위 내용은 알리다! ChatGPT의 폭발적인 증가로 인한 에너지 소비 위기는 데이터 센터 운영자에게 큰 과제를 안겨줍니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

핫 AI 도구

Undresser.AI Undress
사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover
사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool
무료로 이미지를 벗다

Clothoff.io
AI 옷 제거제

AI Hentai Generator
AI Hentai를 무료로 생성하십시오.

인기 기사

뜨거운 도구

메모장++7.3.1
사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전
중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기
강력한 PHP 통합 개발 환경

드림위버 CS6
시각적 웹 개발 도구

SublimeText3 Mac 버전
신 수준의 코드 편집 소프트웨어(SublimeText3)

뜨거운 주제











DALL-E 3는 이전 모델보다 대폭 개선된 모델로 2023년 9월 공식 출시되었습니다. 복잡한 디테일의 이미지를 생성할 수 있는 현재까지 최고의 AI 이미지 생성기 중 하나로 간주됩니다. 그러나 출시 당시에는 제외되었습니다.

이 사이트는 6월 27일에 Jianying이 ByteDance의 자회사인 FaceMeng Technology에서 개발한 비디오 편집 소프트웨어라고 보도했습니다. 이 소프트웨어는 Douyin 플랫폼을 기반으로 하며 기본적으로 플랫폼 사용자를 위한 짧은 비디오 콘텐츠를 제작합니다. Windows, MacOS 및 기타 운영 체제. Jianying은 멤버십 시스템 업그레이드를 공식 발표하고 지능형 번역, 지능형 하이라이트, 지능형 패키징, 디지털 인간 합성 등 다양한 AI 블랙 기술을 포함하는 새로운 SVIP를 출시했습니다. 가격면에서 SVIP 클리핑 월 요금은 79위안, 연간 요금은 599위안(본 사이트 참고: 월 49.9위안에 해당), 월간 연속 구독료는 월 59위안, 연간 연속 구독료는 59위안입니다. 연간 499위안(월 41.6위안)입니다. 또한, 컷 관계자는 "사용자 경험 향상을 위해 기존 VIP에 가입하신 분들도

18일 홈페이지 소식에 따르면 삼성반도체는 최근 자사 기술 블로그를 통해 최신 QLC 플래시 메모리(v7)를 탑재한 차세대 데이터센터급 SSD BM1743을 소개했다. ▲삼성 QLC 데이터센터급 솔리드스테이트드라이브 BM1743 지난 4월 트렌드포스에 따르면 QLC 데이터센터급 솔리드스테이트드라이브 분야에서 삼성전자와 SK하이닉스 자회사인 솔리드다임만이 기업 고객 검증을 통과했다. 그때. 이전 세대 v5QLCV-NAND(이 사이트 참고: Samsung v6V-NAND에는 QLC 제품이 없음)와 비교하여 Samsung v7QLCV-NAND 플래시 메모리는 적층 레이어 수가 거의 두 배로 늘어났으며 저장 밀도도 크게 향상되었습니다. 동시에 v7QLCV-NAND의 부드러움은

편집자 |ScienceAI 질문 응답(QA) 데이터 세트는 자연어 처리(NLP) 연구를 촉진하는 데 중요한 역할을 합니다. 고품질 QA 데이터 세트는 모델을 미세 조정하는 데 사용될 수 있을 뿐만 아니라 LLM(대형 언어 모델)의 기능, 특히 과학적 지식을 이해하고 추론하는 능력을 효과적으로 평가하는 데에도 사용할 수 있습니다. 현재 의학, 화학, 생물학 및 기타 분야를 포괄하는 과학적인 QA 데이터 세트가 많이 있지만 이러한 데이터 세트에는 여전히 몇 가지 단점이 있습니다. 첫째, 데이터 형식이 비교적 단순하고 대부분이 객관식 질문이므로 평가하기 쉽지만 모델의 답변 선택 범위가 제한되고 모델의 과학적 질문 답변 능력을 완전히 테스트할 수 없습니다. 이에 비해 개방형 Q&A는

Editor | KX 약물 연구 및 개발 분야에서 단백질과 리간드의 결합 친화도를 정확하고 효과적으로 예측하는 것은 약물 스크리닝 및 최적화에 매우 중요합니다. 그러나 현재 연구에서는 단백질-리간드 상호작용에서 분자 표면 정보의 중요한 역할을 고려하지 않습니다. 이를 기반으로 Xiamen University의 연구자들은 처음으로 단백질 표면, 3D 구조 및 서열에 대한 정보를 결합하고 교차 주의 메커니즘을 사용하여 다양한 양식 특징을 비교하는 새로운 다중 모드 특징 추출(MFE) 프레임워크를 제안했습니다. 조정. 실험 결과는 이 방법이 단백질-리간드 결합 친화도를 예측하는 데 있어 최첨단 성능을 달성한다는 것을 보여줍니다. 또한 절제 연구는 이 프레임워크 내에서 단백질 표면 정보와 다중 모드 기능 정렬의 효율성과 필요성을 보여줍니다. 관련 연구는 "S"로 시작된다

7월 5일 이 웹사이트의 소식에 따르면 글로벌파운드리는 올해 7월 1일 보도자료를 통해 타고르 테크놀로지(Tagore Technology)의 전력질화갈륨(GaN) 기술 및 지적재산권 포트폴리오 인수를 발표하고 자동차와 인터넷 시장 점유율 확대를 희망하고 있다고 밝혔다. 더 높은 효율성과 더 나은 성능을 탐구하기 위한 사물 및 인공 지능 데이터 센터 응용 분야입니다. 생성 AI와 같은 기술이 디지털 세계에서 계속 발전함에 따라 질화갈륨(GaN)은 특히 데이터 센터에서 지속 가능하고 효율적인 전력 관리를 위한 핵심 솔루션이 되었습니다. 이 웹사이트는 이번 인수 기간 동안 Tagore Technology의 엔지니어링 팀이 GLOBALFOUNDRIES에 합류하여 질화갈륨 기술을 더욱 개발할 것이라는 공식 발표를 인용했습니다. G

1일 본 사이트 소식에 따르면 SK하이닉스는 오늘(1일) 블로그 게시물을 통해 8월 6일부터 8일까지 미국 캘리포니아주 산타클라라에서 열리는 글로벌 반도체 메모리 서밋 FMS2024에 참가한다고 밝혔다. 많은 새로운 세대의 제품. 인공지능 기술에 대한 관심이 높아지고 있는 가운데, 이전에는 주로 NAND 공급업체를 대상으로 한 플래시 메모리 서밋(FlashMemorySummit)이었던 미래 메모리 및 스토리지 서밋(FutureMemoryandStorage) 소개를 올해는 미래 메모리 및 스토리지 서밋(FutureMemoryandStorage)으로 명칭을 변경했습니다. DRAM 및 스토리지 공급업체와 더 많은 플레이어를 초대하세요. SK하이닉스가 지난해 출시한 신제품

오픈AI(Open AI)가 드디어 검색에 본격 진출한다. 샌프란시스코 회사는 최근 검색 기능을 갖춘 새로운 AI 도구를 발표했습니다. 올해 2월 The Information에서 처음 보고한 새로운 도구는 SearchGPT라고 불리며
