目錄
「人工智慧工廠」的出現
評估部署人工智慧的規模
人工智慧工廠的未來
人工智慧工廠與資料中心
首頁 科技週邊 人工智慧 單租戶人工智慧工廠會成為最新的資料中心趨勢嗎?

單租戶人工智慧工廠會成為最新的資料中心趨勢嗎?

Mar 06, 2024 pm 02:25 PM
人工智慧 資料中心 再生能源

單租戶人工智慧工廠會成為最新的資料中心趨勢嗎?

託管資料中心通常設計用來容納數十甚至數百個客戶的不同應用程式。不過,英偉達提供了一種獨特的資料中心模式,該資料中心專門為單一客戶運行特定應用程式。

「人工智慧工廠」的出現

這種新型的資料中心與傳統資料中心不同,它專注於提供更有效率、更靈活的基礎設施服務。傳統資料中心往往承載多個應用程式和多個租戶,而新型資料中心更注重資源的動態分配和最佳化,以滿足不同應用程式和租戶的需求。這種新型資料中心的設計更加靈活和智能,能夠根據需求即時調整資源分配,提高整體效率和效能。透過這種創新的設計理念,

這些新的資料中心主要用於託管少量應用程序,通常由單一租戶使用。它們負責處理資料、訓練模型,並產生令牌以產生人工智慧。我們將這些新型資料中心稱為「人工智慧工廠」。

人工智慧工廠已經成為普遍存在的現象。我相信幾乎所有主要地區都會擁有自己的人工智慧雲,每個主要國家也會如此。因此,我們正處於運算轉型的起點,這是一個重要的轉捩點。

目前,這種趨勢在印度、瑞典、日本和法國等國家逐漸顯現。要實現人工智慧的有效運用,必須考慮各國的語言和文化差異。不同國家對人工智慧的需求也因地而異,例如日本和瑞典。正因為如此,人工智慧資料中心和單租戶人工智慧工廠往往局限於特定國家。

評估部署人工智慧的規模

大型雲端服務供應商如Amazon和Google以及主要的主機託管供應商如Equinix,他們的資料中心規模通常相當龐大,大到足以容納一個足球場的大小。考慮到Nvidia Hopper處理器的高功耗,這些人工智慧工廠的規模將與麥當勞餐廳相提並論。

資料中心機架通常預算功耗在6kW至8kW之間。然而,如果需要針對運行LLM進行最佳化的伺服器,單一伺服器的功耗大約為11kW。這相當於大約14台通用伺服器的平均功耗。

在這種情況下,在典型的資料中心中只能運行有限數量的GPU伺服器,例如DGXH100,如果你有1MW的資料中心,可以在裡面部署大約50台DGXH100伺服器。要將人工智慧大規模部署到大量並髮用戶,將需要大型此類伺服器叢集。這意味著典型的資料中心只能滿足有限數量的客戶的需求,而且很可能只能滿足單一客戶的需求。

人工智慧工廠的未來

為人工智慧工廠等單一用途GPU環境設計最具成本效益的方案是建立專用資料中心,以更高的密度和液體冷卻為設計重點,並將其位置定位在最適合人工智慧企業的地點。

人工智慧叢集的功耗將成為資料中心擁有大量伺服器的限制因素,而其中一些資料中心很可能專門用於人工智慧。圍繞人工智慧的安全和監管框架也可能推動這一趨勢。生成式人工智慧和通用人工智慧的發展引發了一些安全和合規性問題,因此企業可能會決定從高度安全的專用設施運行此類工作負載。

人工智慧工廠與資料中心

由於人工智慧功率密度是傳統資料中心的五到十倍,人工智慧工廠的規模不會達到傳統資料中心的大小,傳統資料中心的面積已超過一百萬平方英尺。

傳統資料中心和人工智慧工廠之間的另一個區別是它們的位置。巨型資料中心往往建在再生能源旁的偏遠地區,而人工智慧工廠則可以建在市中心或大城市地區以及擁有大量可用電力的現有設施中。

目前,有大量辦公室和零售空間未被充分利用,變得非常非常有吸引力的是一座廢棄的建築或未充分利用的城市空間,或者是一個偏僻的舊倉庫的一部分,它們已經擁有電力,可以在其中放下一些人工智慧設備,一些液體冷卻並插入電源去。

儘管無法預測資料中心產業的未來,但人工智慧的快速成長暗示,隨著數位基礎設施營運商爭先恐後地滿足不斷增長的需求,人工智慧工廠可能很快就會成為必需品。

#

以上是單租戶人工智慧工廠會成為最新的資料中心趨勢嗎?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.聊天命令以及如何使用它們
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

位元組跳動剪映推出 SVIP 超級會員:連續包年 499 元,提供多種 AI 功能 位元組跳動剪映推出 SVIP 超級會員:連續包年 499 元,提供多種 AI 功能 Jun 28, 2024 am 03:51 AM

本站6月27日訊息,剪映是由位元組跳動旗下臉萌科技開發的一款影片剪輯軟體,依託於抖音平台且基本面向該平台用戶製作短影片內容,並相容於iOS、安卓、Windows 、MacOS等作業系統。剪映官方宣布會員體系升級,推出全新SVIP,包含多種AI黑科技,例如智慧翻譯、智慧劃重點、智慧包裝、數位人合成等。價格方面,剪映SVIP月費79元,年費599元(本站註:折合每月49.9元),連續包月則為59元每月,連續包年為499元每年(折合每月41.6元) 。此外,剪映官方也表示,為提升用戶體驗,向已訂閱了原版VIP

使用Rag和Sem-Rag提供上下文增強AI編碼助手 使用Rag和Sem-Rag提供上下文增強AI編碼助手 Jun 10, 2024 am 11:08 AM

透過將檢索增強生成和語意記憶納入AI編碼助手,提升開發人員的生產力、效率和準確性。譯自EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG,作者JanakiramMSV。雖然基本AI程式設計助理自然有幫助,但由於依賴對軟體語言和編寫軟體最常見模式的整體理解,因此常常無法提供最相關和正確的程式碼建議。這些編碼助手產生的代碼適合解決他們負責解決的問題,但通常不符合各個團隊的編碼標準、慣例和風格。這通常會導致需要修改或完善其建議,以便將程式碼接受到應

微調真的能讓LLM學到新東西嗎:引入新知識可能讓模型產生更多的幻覺 微調真的能讓LLM學到新東西嗎:引入新知識可能讓模型產生更多的幻覺 Jun 11, 2024 pm 03:57 PM

大型語言模型(LLM)是在龐大的文字資料庫上訓練的,在那裡它們獲得了大量的實際知識。這些知識嵌入到它們的參數中,然後可以在需要時使用。這些模型的知識在訓練結束時被「具體化」。在預訓練結束時,模型實際上停止學習。對模型進行對齊或進行指令調優,讓模型學習如何充分利用這些知識,以及如何更自然地回應使用者的問題。但是有時模型知識是不夠的,儘管模型可以透過RAG存取外部內容,但透過微調使用模型適應新的領域被認為是有益的。這種微調是使用人工標註者或其他llm創建的輸入進行的,模型會遇到額外的實際知識並將其整合

七個很酷的GenAI & LLM技術性面試問題 七個很酷的GenAI & LLM技術性面試問題 Jun 07, 2024 am 10:06 AM

想了解更多AIGC的內容,請造訪:51CTOAI.x社群https://www.51cto.com/aigc/譯者|晶顏審校|重樓不同於網路上隨處可見的傳統問題庫,這些問題需要跳脫常規思維。大語言模型(LLM)在數據科學、生成式人工智慧(GenAI)和人工智慧領域越來越重要。這些複雜的演算法提升了人類的技能,並在許多產業中推動了效率和創新性的提升,成為企業保持競爭力的關鍵。 LLM的應用範圍非常廣泛,它可以用於自然語言處理、文字生成、語音辨識和推薦系統等領域。透過學習大量的數據,LLM能夠產生文本

三星介紹 BM1743 資料中心級 SSD:搭載 v7 QLC V-NAND,可支援 PCIe 5.0 三星介紹 BM1743 資料中心級 SSD:搭載 v7 QLC V-NAND,可支援 PCIe 5.0 Jun 18, 2024 pm 04:15 PM

本站6月18日消息,三星半導體近日在技術部落格介紹了搭載其目前最新QLC快閃記憶體(v7)的下一代資料中心級固態硬碟BM1743。 ▲三星QLC資料中心級固態硬碟BM1743根據TrendForce集邦諮詢4月的說法,在QLC資料中心級固態硬碟領域,僅有深耕多年的三星和SK海力士旗下Solidigm在當時通過了企業客戶驗證。相較上代v5QLCV-NAND(本站註:三星v6V-NAND無QLC產品),三星v7QLCV-NAND閃存在堆疊層數方面幾乎翻了一倍,儲存密度也大幅提升。同時v7QLCV-NAND的順

你所不知道的機器學習五大學派 你所不知道的機器學習五大學派 Jun 05, 2024 pm 08:51 PM

機器學習是人工智慧的重要分支,它賦予電腦從數據中學習的能力,並能夠在無需明確編程的情況下改進自身能力。機器學習在各個領域都有廣泛的應用,從影像辨識和自然語言處理到推薦系統和詐欺偵測,它正在改變我們的生活方式。機器學習領域存在著多種不同的方法和理論,其中最具影響力的五種方法被稱為「機器學習五大派」。這五大派分別為符號派、聯結派、進化派、貝葉斯派和類推學派。 1.符號學派符號學(Symbolism),又稱符號主義,強調利用符號進行邏輯推理和表達知識。該學派認為學習是一種逆向演繹的過程,透過現有的

為大模型提供全新科學複雜問答基準與評估體系,UNSW、阿貢、芝加哥大學等多家機構共同推出SciQAG框架 為大模型提供全新科學複雜問答基準與評估體系,UNSW、阿貢、芝加哥大學等多家機構共同推出SciQAG框架 Jul 25, 2024 am 06:42 AM

編輯|ScienceAI問答(QA)資料集在推動自然語言處理(NLP)研究中發揮著至關重要的作用。高品質QA資料集不僅可以用於微調模型,也可以有效評估大語言模型(LLM)的能力,尤其是針對科學知識的理解和推理能力。儘管目前已有許多科學QA數據集,涵蓋了醫學、化學、生物等領域,但這些數據集仍有一些不足之處。其一,資料形式較為單一,大多數為多項選擇題(multiple-choicequestions),它們易於進行評估,但限制了模型的答案選擇範圍,無法充分測試模型的科學問題解答能力。相比之下,開放式問答

SOTA性能,廈大多模態蛋白質-配體親和力預測AI方法,首次結合分子表面訊息 SOTA性能,廈大多模態蛋白質-配體親和力預測AI方法,首次結合分子表面訊息 Jul 17, 2024 pm 06:37 PM

編輯|KX在藥物研發領域,準確有效地預測蛋白質與配體的結合親和力對於藥物篩選和優化至關重要。然而,目前的研究並沒有考慮到分子表面訊息在蛋白質-配體相互作用中的重要作用。基於此,來自廈門大學的研究人員提出了一種新穎的多模態特徵提取(MFE)框架,該框架首次結合了蛋白質表面、3D結構和序列的信息,並使用交叉注意機制進行不同模態之間的特徵對齊。實驗結果表明,該方法在預測蛋白質-配體結合親和力方面取得了最先進的性能。此外,消融研究證明了該框架內蛋白質表面資訊和多模態特徵對齊的有效性和必要性。相關研究以「S

See all articles