在人工智慧基礎設施方面,您應該選擇邊緣或雲端?
如今,邊緣運算一直是熱門話題。被譽為近年來最令人興奮的技術轉變,關於其變革力量的討論很多!
隨著越來越強大的 AI/ML 演算法重新定義「智慧」以及更便宜、更強大的「邊緣」設備的可用性,這種炒作在很大程度上是真實的。但是,如果要考慮邊緣運算的歷史,它會比最近的興趣讓我們相信的更早。
事實上,運算和智慧最初始於邊緣,當時大多數應用程式幾乎不存在高頻寬網路連線。即使在 1990 年代後期,遠端部署在工廠或現場的關鍵測量設備通常也具有處理傳入感測器資料的專用運算能力。然而,這些設備中的演算法在「智慧」方面只是初級的:主要是訊號處理或資料轉換。
隨著網路能力的提高和連接性的提高,基於雲端的運算在 2000 年代後期開始受到關注。同時,強大的人工智慧演算法作為一種從大量結構化和非結構化資料中解鎖有意義訊息的手段而備受關注。在短短十年內,雲端 AI 已成為 AI 應用程式的首選。
但是,向雲端的轉變也帶來了幾個問題:資料上傳和下載成本、網路可靠性和資料安全等等。同時,隨著價格實惠但功能強大的邊緣設備的興起,邊緣運算在處理能力和成本或佔地面積之間的權衡正在減少。似乎我們現在又回到了考慮「邊緣運算」作為建立智慧應用程式的可行且有吸引力的選擇。
隨著關於邊緣人工智慧和雲端人工智慧哪個更好的辯論越來越激烈,任何熟悉這兩個框架的人都可能會回答「這要看情況了!」。原因是邊緣和雲端基礎設施不是競爭的,而是互補的框架。
在過去的幾年裡,兩者都經歷了巨大的發展和完善,特別是作為人工智慧開發和部署的基礎。與任何技術選擇一樣,選擇實際上可歸結為具體的應用:目標、價值驅動因素、經濟性以及對功耗、尺寸和連接性的任何限制。因此,在嘗試建立正確的基礎設施之前,必須先了解雲端和邊緣人工智慧的優缺點。
當尋求靈活性、可擴展性和易於部署時,基於雲端的人工智慧是一個有吸引力的選擇。如今,大多數雲端服務供應商為人工智慧模式的培訓和部署提供了強大的框架,並提供了按需付費的包,幾乎沒有前期承諾或投資。雲端提供了幾乎沒有限制的運算和儲存選項,使其特別適合大型人工智慧模型。
但對於需要連續評估感測器或影像數據的即時應用程式來說,這可能會成為一個笨拙的選擇,因為它們必須來回傳輸數據,從而導致巨大的成本。這種資料傳輸也使得雲端在很大程度上不適合需要閉環控製或即時行動的低延遲應用程式。
另一方面, 邊緣人工智慧是自動警報或閉環控制的即時資料分析的合理選擇。雖然邊緣基礎設施確實需要在邊緣硬體上進行前期投資,但營運成本與雲端相比要低得多。
今天,有各種各樣的邊緣人工智慧硬體選項可用,包括npu(神經處理單元)、TPU(張量處理單元)以及帶有專用人工智慧加速器的SOC(系統單晶片)和SoMs(模組上系統)。人工智慧的低成本和低功耗硬體是一個活躍的研究領域,並有可能提供更好的選擇。另一方面,基於人工智慧的消費應用必須處理相當多樣化的邊緣設備(手機、平板電腦、個人電腦等),這使得邊緣部署成為一個潛在的令人生畏的前景。
因此,邊緣基礎設施可能不利於快速原型開發,也不容易擴展。雖然聯合學習,AI模型的分散式訓練的概念允許在邊緣進行訓練和部署,但雲端仍然是訓練需要足夠運算能力的大型模型的邏輯選擇。
但解決方案不一定是非此即彼的選擇。隨著應用程式過渡到更多基於微服務的架構,它們可以分解為具有自己特定部署框架的更小的功能或微服務。因此,不必在雲端和邊緣之間進行選擇,重點可以放在針對特定應用程式最佳化使用兩者。
例如,一個應用程式可能從雲端上的快速原型開始。隨著它的發展,需要低延遲和即時決策的功能可以轉移到邊緣,而那些需要規模和靈活性的功能可以保留在雲端。模型訓練或再訓練可以在雲端集中管理,而邊緣的一些聯邦學習可以在本地提高準確性。同樣,敏感資料可以在邊緣處理,更通用的資料可以轉移到雲端。
#組織、開發人員和從業者最好不要將雲端和邊緣視為不同的替代方案,而是將其視為從邊緣到雲端的連續統一體,中間有許多不同的基礎設施選項。這包括不同類型的邊緣——營運邊緣、網路邊緣、行動端點等,以及網路上不同類型的分散式處理——私有雲、公有雲、小雲、霧運算等。
雖然複雜性可能是一個挑戰,但找到正確的技術組合開始為組織提供一個獨特的機會,以最大限度地提高人工智慧的價值,同時最大限度地降低成本和風險。
以上是在人工智慧基礎設施方面,您應該選擇邊緣或雲端?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

本站6月27日訊息,剪映是由位元組跳動旗下臉萌科技開發的一款影片剪輯軟體,依託於抖音平台且基本面向該平台用戶製作短影片內容,並相容於iOS、安卓、Windows 、MacOS等作業系統。剪映官方宣布會員體系升級,推出全新SVIP,包含多種AI黑科技,例如智慧翻譯、智慧劃重點、智慧包裝、數位人合成等。價格方面,剪映SVIP月費79元,年費599元(本站註:折合每月49.9元),連續包月則為59元每月,連續包年為499元每年(折合每月41.6元) 。此外,剪映官方也表示,為提升用戶體驗,向已訂閱了原版VIP

透過將檢索增強生成和語意記憶納入AI編碼助手,提升開發人員的生產力、效率和準確性。譯自EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG,作者JanakiramMSV。雖然基本AI程式設計助理自然有幫助,但由於依賴對軟體語言和編寫軟體最常見模式的整體理解,因此常常無法提供最相關和正確的程式碼建議。這些編碼助手產生的代碼適合解決他們負責解決的問題,但通常不符合各個團隊的編碼標準、慣例和風格。這通常會導致需要修改或完善其建議,以便將程式碼接受到應

想了解更多AIGC的內容,請造訪:51CTOAI.x社群https://www.51cto.com/aigc/譯者|晶顏審校|重樓不同於網路上隨處可見的傳統問題庫,這些問題需要跳脫常規思維。大語言模型(LLM)在數據科學、生成式人工智慧(GenAI)和人工智慧領域越來越重要。這些複雜的演算法提升了人類的技能,並在許多產業中推動了效率和創新性的提升,成為企業保持競爭力的關鍵。 LLM的應用範圍非常廣泛,它可以用於自然語言處理、文字生成、語音辨識和推薦系統等領域。透過學習大量的數據,LLM能夠產生文本

大型語言模型(LLM)是在龐大的文字資料庫上訓練的,在那裡它們獲得了大量的實際知識。這些知識嵌入到它們的參數中,然後可以在需要時使用。這些模型的知識在訓練結束時被「具體化」。在預訓練結束時,模型實際上停止學習。對模型進行對齊或進行指令調優,讓模型學習如何充分利用這些知識,以及如何更自然地回應使用者的問題。但是有時模型知識是不夠的,儘管模型可以透過RAG存取外部內容,但透過微調使用模型適應新的領域被認為是有益的。這種微調是使用人工標註者或其他llm創建的輸入進行的,模型會遇到額外的實際知識並將其整合

本站7月31日消息,科技巨頭亞馬遜於週二在美國特拉華州聯邦法院起訴了芬蘭電信公司諾基亞,指控其侵犯了亞馬遜十幾項與雲端運算技術相關的專利。 1.亞馬遜在訴訟中表示,諾基亞濫用了亞馬遜雲端運算服務(AWS)的相關技術,包括雲端運算基礎設施、安全性和效能方面的技術,來加強其自身的雲端服務產品。訴狀稱,亞馬遜於2006年推出了AWS,其開創性的雲端運算技術早在2000年代初期就開始研發。 「亞馬遜是雲端運算領域的先驅,現在諾基亞卻在未經許可的情況下使用亞馬遜的專利雲端運算創新成果,」訴狀寫道。亞馬遜要求法院發布禁令,阻

編輯|ScienceAI問答(QA)資料集在推動自然語言處理(NLP)研究中發揮著至關重要的作用。高品質QA資料集不僅可以用於微調模型,也可以有效評估大語言模型(LLM)的能力,尤其是針對科學知識的理解和推理能力。儘管目前已有許多科學QA數據集,涵蓋了醫學、化學、生物等領域,但這些數據集仍有一些不足之處。其一,資料形式較為單一,大多數為多項選擇題(multiple-choicequestions),它們易於進行評估,但限制了模型的答案選擇範圍,無法充分測試模型的科學問題解答能力。相比之下,開放式問答

編輯|KX在藥物研發領域,準確有效地預測蛋白質與配體的結合親和力對於藥物篩選和優化至關重要。然而,目前的研究並沒有考慮到分子表面訊息在蛋白質-配體相互作用中的重要作用。基於此,來自廈門大學的研究人員提出了一種新穎的多模態特徵提取(MFE)框架,該框架首次結合了蛋白質表面、3D結構和序列的信息,並使用交叉注意機制進行不同模態之間的特徵對齊。實驗結果表明,該方法在預測蛋白質-配體結合親和力方面取得了最先進的性能。此外,消融研究證明了該框架內蛋白質表面資訊和多模態特徵對齊的有效性和必要性。相關研究以「S

本站8月1日消息,SK海力士今天(8月1日)發布博文,宣布將出席8月6日至8日,在美國加州聖克拉拉舉行的全球半導體記憶體峰會FMS2024,展示諸多新一代產品。未來記憶體和儲存高峰會(FutureMemoryandStorage)簡介前身是主要面向NAND供應商的快閃記憶體高峰會(FlashMemorySummit),在人工智慧技術日益受到關注的背景下,今年重新命名為未來記憶體和儲存高峰會(FutureMemoryandStorage),以邀請DRAM和儲存供應商等更多參與者。新產品SK海力士去年在
