目錄
一句話5分鐘,3D數字人直接上崗
數位人技術全面AI化
數字人,步入大模型時代應用新範式
首頁 科技週邊 人工智慧 大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

May 08, 2024 pm 08:10 PM
人工智慧 數位人 大模型

最快5分鐘,打造一個直接上崗工作的3D數字人。

這是大模型為數位人領域帶來的最新震撼。

就像這樣,一句話描述需求:

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

產生的數字人直接就能進駐直播間當主播。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

跳起女團舞也不在話下。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

整個製作過程中,想到什麼說什麼就行,大模型都能自動拆解需求,瞬間get設計、修改思路。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

△2倍速

再也不怕老闆/甲方的想法太新奇。

這樣的文生數位人技術,來自百度智慧雲端最新發布。該說不說,是要把數字人的使用門檻一口氣砍沒的節奏了。

聽聞如此神器,我們照例第一時間爭取到了內測資格,更多細節,一起先睹為快~

一句話5分鐘,3D數字人直接上崗

#從Chatbot到文生圖片,再到文生視頻,大模型帶來的互動方式的變革,已經無需贅言。

現在,在百度智慧雲曦靈平台上,基於文心一言4.0,數位人客製化這件事,同樣能透過自然語言對話的形式實現。

舉個例子,產生一個品牌代言人,需要幾個步驟?

首先,輸入「產生一個百度智慧雲端品牌代言人」這樣的提示詞,同時上傳logo圖片。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

大模型就會自動從臉型、髮型、妝容、服裝、配件等多個維度,開始一步一步思考:

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

自動打造出符合要求的數字人。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

△8倍速

如果需要調整細節,一樣「說話」就能完成。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

也就5-10分鐘,一個360°無死角的高品質數字人就基本成型了。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

捏臉完畢,下一步就是把數字人綁上表情,讓Ta能動起來。同樣只需要一鍵操作,等待1-2分鐘。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

比相比於過去高精度3D數字人好幾天、甚至好幾個月的客製化週期,這個分鐘級的效率,確實稱得上是「顛覆」了。

值得一提的是,效率如此大幅提升的前提下,這樣的文生數字人細節品質依然保持著高水準。

表情細節:

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

動作品質:

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

結合百度智慧雲端在數位人領域的長期積累,上崗播新聞、直播帶貨都不在話下。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

數位人技術全面AI化

效率與落地能力的直覺提升之外,這次百度智慧雲端推出的文生數位人方案背後,不少技術細節也值得好好說。

如前文所說,其技術基座,正是文心一言4.0.

而起到關鍵作用的大模型能力包括:

  • #自動拆解要做的任務和子任務
  • 顯示思考過程,做到有理有據,讓整個生成過程「白盒化」
  • #實現了基於內容提煉的短期記憶,可以透過對話持續調整數字人形象

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

這樣一來,大模型就成了一個能懂人類甲方心理的數字人造型助理,可以模仿人類思路,去摳數字人定制的每一個細節,並且做到過程可控。

同時,大模型還在背後施展出了呼叫工具的能力。

例如,調用涵蓋6000 維度的臉型及五官細節“知識庫”,整體調整數字人面容。

大模型技術之外,百度智慧雲還在曦靈平台中加入了新的AI渲染技術,支援AI驅動、AI布料模擬,讓數位人的表情肢體動作更自然,服裝布料質感更真實。包括:

  • 動態褶皺貼圖,讓紋理更真實。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

  • 分鐘級4D自動綁定,讓眼睛、嘴唇等部位能完美閉合,並支援表情風格切換。
  • 肢體肌肉擠壓、碰撞即時模擬。
  • ……

官方也透露,接下來,百度智慧雲端計畫實現角色、行為、場景、燈光、鏡頭要素的全面AI化。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

數字人,步入大模型時代應用新範式

#如果說去年大家還在熱火朝天地討論基礎模型,那麼今年以來由Sora而起,大模型帶來的應用範式的變革,已成為科技圈新的熱議焦點。

在互動方式的改變之上,核心受到關注的,其實還是效率提升

輸出創意,生成所需,大模型正在讓越來越多本來需要消耗大量時間、人力、金錢的工作,變得簡單、有效率、人人可用。

現在,百度智慧雲端在3D數位人領域的最新技術進展,就是這種可能性在人們更為熟知的影像、影片領域之外,拓展開來的一個代表。

大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住

可以預見的是,過去更多在大企業、大機構中被使用的數位人員工,在新典範的驅動之下,步入「尋常百姓家」正在成為可能。

先前,清華大學《虛擬數位人研究報告2.0版》數據顯示,從頭部企業的佈局來看,面向B端的數位人產品服務是市場的主要組成部分,佔比達到79% 。

而隨著大模型技術對數位人應用模式的顛覆,不僅中小企業不用再對6位數的3D高精度數位人望而卻步,C端的應用也將得以拓展。

這也意味著,數位人的應用和商業化,已經翻開新的一頁。

#

以上是大模型捲爆數字人:一句話5分鐘實現定制,跳舞主持帶貨都能hold住的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

<🎜>:泡泡膠模擬器無窮大 - 如何獲取和使用皇家鑰匙
3 週前 By 尊渡假赌尊渡假赌尊渡假赌
北端:融合系統,解釋
3 週前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

熱門話題

Java教學
1664
14
CakePHP 教程
1423
52
Laravel 教程
1318
25
PHP教程
1268
29
C# 教程
1248
24
位元組跳動剪映推出 SVIP 超級會員:連續包年 499 元,提供多種 AI 功能 位元組跳動剪映推出 SVIP 超級會員:連續包年 499 元,提供多種 AI 功能 Jun 28, 2024 am 03:51 AM

本站6月27日訊息,剪映是由位元組跳動旗下臉萌科技開發的一款影片剪輯軟體,依託於抖音平台且基本面向該平台用戶製作短影片內容,並相容於iOS、安卓、Windows 、MacOS等作業系統。剪映官方宣布會員體系升級,推出全新SVIP,包含多種AI黑科技,例如智慧翻譯、智慧劃重點、智慧包裝、數位人合成等。價格方面,剪映SVIP月費79元,年費599元(本站註:折合每月49.9元),連續包月則為59元每月,連續包年為499元每年(折合每月41.6元) 。此外,剪映官方也表示,為提升用戶體驗,向已訂閱了原版VIP

大模型App騰訊元寶上線!混元再升級,打造可隨身攜帶的全能AI助理 大模型App騰訊元寶上線!混元再升級,打造可隨身攜帶的全能AI助理 Jun 09, 2024 pm 10:38 PM

5月30日,騰訊宣布旗下混元大模型全面升級,基於混元大模型的App「騰訊元寶」正式上線,蘋果及安卓應用程式商店皆可下載。相較於先前測試階段的混元小程式版本,面向工作效率場景,騰訊元寶提供了AI搜尋、AI總結、AI寫作等核心能力;面向日常生活場景,元寶的玩法也更加豐富,提供了多個特色AI應用,並新增了創建個人智能體等玩法。 「騰訊做大模型不爭一時之先。」騰訊雲副總裁、騰訊混元大模型負責人劉煜宏表示:「過去的一年,我們持續推進騰訊混元大模型的能力爬坡,在豐富、海量的業務場景中打磨技術,同時洞察用戶的真實需求

使用Rag和Sem-Rag提供上下文增強AI編碼助手 使用Rag和Sem-Rag提供上下文增強AI編碼助手 Jun 10, 2024 am 11:08 AM

透過將檢索增強生成和語意記憶納入AI編碼助手,提升開發人員的生產力、效率和準確性。譯自EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG,作者JanakiramMSV。雖然基本AI程式設計助理自然有幫助,但由於依賴對軟體語言和編寫軟體最常見模式的整體理解,因此常常無法提供最相關和正確的程式碼建議。這些編碼助手產生的代碼適合解決他們負責解決的問題,但通常不符合各個團隊的編碼標準、慣例和風格。這通常會導致需要修改或完善其建議,以便將程式碼接受到應

微調真的能讓LLM學到新東西嗎:引入新知識可能讓模型產生更多的幻覺 微調真的能讓LLM學到新東西嗎:引入新知識可能讓模型產生更多的幻覺 Jun 11, 2024 pm 03:57 PM

大型語言模型(LLM)是在龐大的文字資料庫上訓練的,在那裡它們獲得了大量的實際知識。這些知識嵌入到它們的參數中,然後可以在需要時使用。這些模型的知識在訓練結束時被「具體化」。在預訓練結束時,模型實際上停止學習。對模型進行對齊或進行指令調優,讓模型學習如何充分利用這些知識,以及如何更自然地回應使用者的問題。但是有時模型知識是不夠的,儘管模型可以透過RAG存取外部內容,但透過微調使用模型適應新的領域被認為是有益的。這種微調是使用人工標註者或其他llm創建的輸入進行的,模型會遇到額外的實際知識並將其整合

工業知識圖譜進階實戰 工業知識圖譜進階實戰 Jun 13, 2024 am 11:59 AM

一、背景簡介首先來介紹雲問科技的發展歷程。雲問科技公...2023年,正是大模型盛行的時期,很多企業認為已經大模型之後圖譜的重要性大大降低了,之前研究的預置的資訊化系統也都不重要了。不過隨著RAG的推廣、資料治理的盛行,我們發現更有效率的資料治理和高品質的資料是提升私有化大模型效果的重要前提,因此越來越多的企業開始重視知識建構的相關內容。這也推動了知識的建構和加工開始向更高層次發展,其中有許多技巧和方法可以挖掘。可見一個新技術的出現,並不是將所有的舊技術打敗,也有可能將新技術和舊技術相互融合後

為大模型提供全新科學複雜問答基準與評估體系,UNSW、阿貢、芝加哥大學等多家機構共同推出SciQAG框架 為大模型提供全新科學複雜問答基準與評估體系,UNSW、阿貢、芝加哥大學等多家機構共同推出SciQAG框架 Jul 25, 2024 am 06:42 AM

編輯|ScienceAI問答(QA)資料集在推動自然語言處理(NLP)研究中發揮著至關重要的作用。高品質QA資料集不僅可以用於微調模型,也可以有效評估大語言模型(LLM)的能力,尤其是針對科學知識的理解和推理能力。儘管目前已有許多科學QA數據集,涵蓋了醫學、化學、生物等領域,但這些數據集仍有一些不足之處。其一,資料形式較為單一,大多數為多項選擇題(multiple-choicequestions),它們易於進行評估,但限制了模型的答案選擇範圍,無法充分測試模型的科學問題解答能力。相比之下,開放式問答

小米位元組聯手!小愛同學接入豆包大模型:手機、SU7已搭載 小米位元組聯手!小愛同學接入豆包大模型:手機、SU7已搭載 Jun 13, 2024 pm 05:11 PM

6月13日消息,根據字節旗下「火山引擎」公眾號介紹,小米旗下人工智慧助理「小愛同學」與火山引擎達成合作,雙方基於豆包大模型實現更智慧的AI互動體驗。據悉,位元組跳動打造的豆包大模型,每日能夠高效處理數量多達1200億個的文本tokens、生成3000萬張內容。小米借助豆包大模型提升自身模型的學習與推理能力,打造出全新的“小愛同學”,不僅更加精準地把握用戶需求,還以更快的響應速度和更全面的內容服務。例如,當使用者詢問複雜的科學概念時,&ldq

AI硬體再添一員!不圖取代手機,NotePin反而能活更久? AI硬體再添一員!不圖取代手機,NotePin反而能活更久? Sep 02, 2024 pm 01:40 PM

目前為止,AI穿戴裝置賽道還沒有任何一個產品取得特別好的成績。今年年初在MWC24橫空出世的AIPin,評樣機一經寄出,發佈時被狂吹的「AI神話」也開始破滅,短短幾個月就經歷了大規模退貨;同樣開局賣爆的RabbitR1則相對好些,但也在大批交付時受到了類似「Android套殼」的不利評價。現在,又有一家公司進入了AI穿戴裝置賽道。科技媒體TheVerge昨天發布博文,表示AI新創公司Plaud推出了一款名為NotePin產品。有別於仍在「畫餅」階段的AIFriend,NotePin目前已開始

See all articles