使用 autoML 技術更容易開發AI
德國弗萊堡大學機器學習實驗室負責人Frank Hutter 說,所有這些人類決策的結果是,複雜的模型最終是被"憑直覺設計",而不是系統地設計的。
一個名為自動機器學習(autoML)的不斷發展的領域旨在消除這種猜測。其想法是讓演算法接管研究人員目前在設計模型時必須做出的決定。最終,這些技術可以使機器學習變得更容易獲得。
儘管自動機器學習已經存在了近十年,但研究人員仍在努力改進它。近日,在巴爾的摩舉行的一次新會議,展示了為提高autoML的準確性和簡化其性能而做出的努力。
人們對 autoML 簡化機器學習的潛力產生了濃厚的興趣。亞馬遜和谷歌等公司已經提供了利用 autoML 技術的低程式碼機器學習工具。如果這些技術變得更有效,它可以加速研究並讓更多人使用機器學習。
這樣做的目的是為了讓人們可以選擇他們想問的問題,將 autoML 工具指向它,並獲得他們想要的結果。
這個願景是"電腦科學的聖杯",懷俄明大學的電腦科學助理教授兼會議組織者Lars Kotthoff說,"你指定了問題,電腦就知道如何解決它,這就是你要做的一切。"但首先,研究人員必須弄清楚如何使這些技術更省時、更節能。
自動機器學習可以解決什麼?
乍一看,autoML 的概念似乎是多餘的——畢竟,機器學習已經是關於自動化從資料中獲取洞察力的過程。但由於 autoML 演算法在底層機器學習模型之上的抽象層級上運行,僅依賴這些模型的輸出作為指導,因此它們可以節省時間和計算量。
研究人員可以將 autoML 技術應用於預先訓練的模型以獲得新的見解,而不會浪費運算能力來重複現有的研究。
例如,美國富士通研究所的研究科學家 Mehdi Bahrami 和他的合著者介紹了最近的工作,關於如何將BERT-sort演算法與不同的預訓練模型一起使用以適應新的目的。
BERT-sort 是一種演算法,可以在對資料集進行訓練時找出所謂的"語義順序"。例如,給定的電影評論數據,它知道"偉大的"電影的排名要高於"好"和"壞"的電影。
借助 autoML 技術,還可以將學習到的語義順序推廣到對癌症診斷甚至外語文本進行分類,從而減少時間和計算量。
"BERT 需要數月的計算,而且非常昂貴,例如要花費100 萬美元來生成該模型並重複這些過程。"Bahrami 說,"因此,如果每個人都想做同樣的事情,那很昂貴——它不節能,對世界的可持續發展不利。"
儘管該領域顯示出希望,但研究人員仍在尋找使autoML 技術的計算效率更高的方法。例如,透過像神經架構搜尋(NAS)這樣的方法,建立和測試許多不同的模型以找到最合適的模型,完成所有這些迭代所需的能量可能很大。
自動機器學習也可以應用於不涉及神經網路的機器學習演算法,例如建立隨機決策森林或支援向量機來對資料進行分類。這些領域的研究正在持續進行中,已經有許多編碼庫可供想要將 autoML 技術整合到他們的專案中的人們使用。
Hutter表示,下一步是使用autoML量化不確定性並解決演算法中的可信度和公平性問題。在這個願景中,關於可信賴性和公平性的標準將類似於任何其他機器學習的約束條件,例如準確性。而autoML可以在這些演算法發布之前捕獲並自動修正這些演算法中發現的偏差。
神經架構搜尋的持續進展
但是對於像深度學習這類應用,autoML還有很長的路要走。用於訓練深度學習模型的數據,如圖像、文件和錄製的語音,通常是密集且複雜的。它需要巨大的運算能力來處理。除了在財力雄厚的大企業工作的研究人員之外,訓練這些模型的成本和時間可能會讓任何人望而卻步。
該會議上的一項競賽要求是參與者開發用於神經架構搜尋的節能替代演算法。這是一個相當大的挑戰,因為這種技術具有"臭名昭著"的計算需求。它會自動循環遍歷無數的深度學習模型,以幫助研究人員為他們的應用選擇合適的模型,但該過程可能需要數月時間,成本超過一百萬美元。
這些被稱為零成本神經架構搜尋代理的替代演算法的目標是,透過大幅削減其對運算的需求,使神經架構搜尋更容易取得、更環保。其結果只需要幾秒鐘就能運行,而不是幾個月。目前,這些技術仍處於發展的早期階段並且通常不可靠,但機器學習研究人員預測,它們有可能使模型選擇過程更有效率。
以上是使用 autoML 技術更容易開發AI的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

熱門話題

本站6月27日訊息,剪映是由位元組跳動旗下臉萌科技開發的一款影片剪輯軟體,依託於抖音平台且基本面向該平台用戶製作短影片內容,並相容於iOS、安卓、Windows 、MacOS等作業系統。剪映官方宣布會員體系升級,推出全新SVIP,包含多種AI黑科技,例如智慧翻譯、智慧劃重點、智慧包裝、數位人合成等。價格方面,剪映SVIP月費79元,年費599元(本站註:折合每月49.9元),連續包月則為59元每月,連續包年為499元每年(折合每月41.6元) 。此外,剪映官方也表示,為提升用戶體驗,向已訂閱了原版VIP

透過將檢索增強生成和語意記憶納入AI編碼助手,提升開發人員的生產力、效率和準確性。譯自EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG,作者JanakiramMSV。雖然基本AI程式設計助理自然有幫助,但由於依賴對軟體語言和編寫軟體最常見模式的整體理解,因此常常無法提供最相關和正確的程式碼建議。這些編碼助手產生的代碼適合解決他們負責解決的問題,但通常不符合各個團隊的編碼標準、慣例和風格。這通常會導致需要修改或完善其建議,以便將程式碼接受到應

大型語言模型(LLM)是在龐大的文字資料庫上訓練的,在那裡它們獲得了大量的實際知識。這些知識嵌入到它們的參數中,然後可以在需要時使用。這些模型的知識在訓練結束時被「具體化」。在預訓練結束時,模型實際上停止學習。對模型進行對齊或進行指令調優,讓模型學習如何充分利用這些知識,以及如何更自然地回應使用者的問題。但是有時模型知識是不夠的,儘管模型可以透過RAG存取外部內容,但透過微調使用模型適應新的領域被認為是有益的。這種微調是使用人工標註者或其他llm創建的輸入進行的,模型會遇到額外的實際知識並將其整合

想了解更多AIGC的內容,請造訪:51CTOAI.x社群https://www.51cto.com/aigc/譯者|晶顏審校|重樓不同於網路上隨處可見的傳統問題庫,這些問題需要跳脫常規思維。大語言模型(LLM)在數據科學、生成式人工智慧(GenAI)和人工智慧領域越來越重要。這些複雜的演算法提升了人類的技能,並在許多產業中推動了效率和創新性的提升,成為企業保持競爭力的關鍵。 LLM的應用範圍非常廣泛,它可以用於自然語言處理、文字生成、語音辨識和推薦系統等領域。透過學習大量的數據,LLM能夠產生文本

編輯|ScienceAI問答(QA)資料集在推動自然語言處理(NLP)研究中發揮著至關重要的作用。高品質QA資料集不僅可以用於微調模型,也可以有效評估大語言模型(LLM)的能力,尤其是針對科學知識的理解和推理能力。儘管目前已有許多科學QA數據集,涵蓋了醫學、化學、生物等領域,但這些數據集仍有一些不足之處。其一,資料形式較為單一,大多數為多項選擇題(multiple-choicequestions),它們易於進行評估,但限制了模型的答案選擇範圍,無法充分測試模型的科學問題解答能力。相比之下,開放式問答

機器學習是人工智慧的重要分支,它賦予電腦從數據中學習的能力,並能夠在無需明確編程的情況下改進自身能力。機器學習在各個領域都有廣泛的應用,從影像辨識和自然語言處理到推薦系統和詐欺偵測,它正在改變我們的生活方式。機器學習領域存在著多種不同的方法和理論,其中最具影響力的五種方法被稱為「機器學習五大派」。這五大派分別為符號派、聯結派、進化派、貝葉斯派和類推學派。 1.符號學派符號學(Symbolism),又稱符號主義,強調利用符號進行邏輯推理和表達知識。該學派認為學習是一種逆向演繹的過程,透過現有的

編輯|KX在藥物研發領域,準確有效地預測蛋白質與配體的結合親和力對於藥物篩選和優化至關重要。然而,目前的研究並沒有考慮到分子表面訊息在蛋白質-配體相互作用中的重要作用。基於此,來自廈門大學的研究人員提出了一種新穎的多模態特徵提取(MFE)框架,該框架首次結合了蛋白質表面、3D結構和序列的信息,並使用交叉注意機制進行不同模態之間的特徵對齊。實驗結果表明,該方法在預測蛋白質-配體結合親和力方面取得了最先進的性能。此外,消融研究證明了該框架內蛋白質表面資訊和多模態特徵對齊的有效性和必要性。相關研究以「S

本站7月5日消息,格芯(GlobalFoundries)於今年7月1日發布新聞稿,宣布收購泰戈爾科技(TagoreTechnology)的功率氮化鎵(GaN)技術及智慧財產權組合,希望在汽車、物聯網和人工智慧資料中心應用領域探索更高的效率和更好的效能。隨著生成式人工智慧(GenerativeAI)等技術在數位世界的不斷發展,氮化鎵(GaN)已成為永續高效電源管理(尤其是在資料中心)的關鍵解決方案。本站引述官方公告內容,在本次收購過程中,泰戈爾科技公司工程師團隊將加入格芯,進一步開發氮化鎵技術。 G
