Das neue Blut der virtuellen Realität, die 3D-Modellierungsbranche, die durch KI gestärkt wird

Was ist die Obergrenze generativer KI? Die Antwort auf diese Frage wird möglicherweise nicht in kurzer Zeit verfügbar sein, zumindest scheint die generative KI jetzt ein neues Feld erobert zu haben. Bisher konzentrierte sich der Arbeitsumfang der generativen KI hauptsächlich auf Textverarbeitung, Malerei, Tonverarbeitung usw., aber die Fähigkeiten der generativen KI gehen offensichtlich weit darüber hinaus.

Kürzlich hat das Open-Source-Unternehmen für generative KI Stability AI offiziell das Stable Animation SDK veröffentlicht, und auch das mit Spannung erwartete Stable Diffusion-Modell (im Folgenden als Stable bezeichnet) hat offiziell eine neue Version veröffentlicht. Jetzt können Benutzer das 3D besser steuern von KI generiert. Modellieren und modifizieren Sie bestimmte Parameter.

Vielleicht denken viele Leute, nachdem sie diese Nachricht gesehen haben: „3D-Modell? Bedeutet das Quadrate, Streifen und dergleichen?“ Schließlich ist dies in den Augen der meisten Menschen wahrscheinlich die wahre Komplexität der 3D-Modellierung der gewöhnlichen KI. Hier liegt jedoch der Reiz der generativen KI. Durch Datenverarbeitung und -analyse, gepaart mit dem Verständnis natürlicher Sprache, kann die heutige KI komplexere und vollständigere Modelle auf der Grundlage von Beschreibungen generieren und ist nicht auf einfache Blockmodelle beschränkt.

Nicht nur 2D zu 3D

Zuvor hat Stable viel Aufmerksamkeit auf sich gezogen, weil es 2D-Bilder und Beschreibungen direkt in 3D-Modelle umwandeln kann. Die von Stable generierten 3D-Modelle sind zwar nicht so präzise wie die, die Profis mit viel Zeitaufwand erstellen, aber Wenn man bedenkt, wie viel Zeit es braucht, um es zu erzeugen, reicht es aus, um bei allen einen großen Schock auszulösen.

Im neuesten von Stability AI veröffentlichten Demonstrationsvideo sind die 3D-Modelle von Stable nicht mehr auf Stillleben beschränkt. Selbst bewegte Charaktere können problemlos in 3D-Modelle umgewandelt werden, und die Reichweite und Haltung der Bewegung bleibt gleich wie die der Originalversion. Eine ähnliche Technologie wird häufig bei der Animationsproduktion verwendet, um das Bild und die Objekte dreidimensionaler erscheinen zu lassen. Bei einigen Animationen wird das Bild von 2D in 3D umgewandelt, um die Spannung des Bildes hervorzuheben.

Quelle: Stabilitäts-KI

In der traditionellen Animationsbranche erfordert die Konvertierung von 2D-Bildern in 3D eine zeitaufwändige Beschäftigung mit viel Personal. Mit Hilfe von Stable müssen Sie nur 2D-Bilder in das Modell eingeben, um eine hohe Qualität zu erzielen Ergebnisse: Hochwertige 3D-Ausgangsmodelle, die den Zeit- und Kostenaufwand für die Modellierung erheblich reduzieren.

Natürlich, wenn dies der Fall ist, werden sich die Praktizierenden vielleicht freuen. Was nützt Stable für die Mehrheit der Internetnutzer? Der Schlüssel liegt darin, dass die 3D-Modellgenerierung von Stable keiner detaillierten Anleitung bedarf. Auch wenn es sich nur um eine einfache Zeichnung handelt, kann Stable ein 3D-Modell erstellen, das beispielsweise wie ein Kindergartenkind aussieht, nachdem es „poliert“ wurde " von Stable. Es wird ein einigermaßen ansehnliches 3D-Bild.

Quelle: YouTube

Stabil Der Wunsch und das Ziel ist es, alle Ihre Bilder und Worte zum Leben zu erwecken. Daher werden alle Ergebnisse der Stabilitäts-KI direkt offengelegt und den Internetnutzern auf Open-Source-Basis zur Verfügung gestellt. Für die Mehrheit der zweidimensionalen Enthusiasten ist dies vielleicht der einfachste Weg, ihre „Papierfrauen“ in Bewegung zu setzen.

Und aus den Fähigkeiten von Stable zur dynamischen 3D-Modellgenerierung können wir auch einige zukünftige Anwendungsszenarien erkennen, wie zum Beispiel günstigere und bequemere Bewegungserfassungssysteme. Solange die Rechenleistung ausreicht, werden die von der Kamera erfassten Bilder theoretisch erfasst lassen sich entsprechende 3D-Modellaktionen in Echtzeit generieren.

Welche wunderbaren Verwendungsmöglichkeiten gibt es darüber hinaus noch? Ich weiß nicht, ob Sie kürzlich eine heiße Neuigkeit gesehen haben. Caryn Marjorie, eine Internet-Berühmtheit aus Übersee, arbeitete mit einem KI-Team zusammen, um mithilfe von GPT-4 eine digitale Version von sich selbst zu kopieren, und verkaufte dann das Nutzungsrecht für die digitale Version Ein Dollar pro Minute. Verkaufen Sie an Ihre Fans.

In nur einer Woche verdiente Caryn Marjorie 71.000 US-Dollar durch die Bereitstellung von Voice-Chat-Chat-Diensten. Als visuelle Wesen ist unsere Empfindlichkeit gegenüber Ton tatsächlich geringer als die gegenüber Bildern. Wenn Stable auch auf verwandte Bereiche angewendet wird, ist es dann möglich, eine echte KI-Freundin zu erschaffen? Es ist beweglich und gesprächig, genug, um Ihr leeres Herz zu beruhigen.

Ähm, okay, lasst uns dieses Thema vorerst beenden. Zumindest angesichts der aktuellen Modelleffizienz und Rechenleistungsskala ist es für Einzelpersonen wahrscheinlich sehr schwierig, eine dynamische 3D-Modellgenerierung in Echtzeit und mit hoher Spezifikation zu erreichen, aber in Anbetracht dessen Der Halbleiter Mit dem Tempo des Fortschritts in der Branche ist dieser Tag vielleicht nicht mehr weit von uns entfernt.

Neue Produktivitätstools

Stabil Das größte Problem war bisher, dass 3D-Modelle nur auf Basis von Beschreibungen oder Bildern generiert werden konnten. Wenn die generierten Ergebnisse nicht gut waren, konnten die Bilder oder Textinformationen je nach Leistung neu angepasst werden Die Grafikkarte und die Generierung von 3D-Modellen werden auch einen Zeitunterschied im Vergleich zu herkömmlicher Frage-und-Antwort-KI wie ChatGPT aufweisen.

Obwohl der 3D-Modellgenerierungseffekt von Stable weitaus besser ist als bei ähnlichen Anwendungen in der Vergangenheit, sind die Nutzungsszenarien sehr begrenzt. Es kann Community-Enthusiasten nur ein einfaches und praktisches 3D-Modellgenerierungstool bieten. Community-Benutzer haben lange gehofft, dass Stability AI Parameteranpassungsfunktionen zu Stabel hinzufügen kann, sodass unbefriedigende Modelldetails geändert werden können.

Die Antwort von Stability AI ist das Stabel Animation SDK. Nach der Verwendung von Stabel zum Generieren eines 3D-Modells können Benutzer die entsprechenden Parameter direkt über die Schnittstelle eingeben, Details des Modells anpassen oder hinzufügen und das Modell erstellen Mehr entsprechend den Benutzeranforderungen.

Der Beschreibungsdatei der Schnittstelle nach zu urteilen, gibt es viele Parameter, die eine Änderung unterstützen, von Grundfarbe, Form, Größe, Textur bis hin zu Aktionshaltung usw., und der Anpassungsprozess erfordert nicht nur die Eingabe professioneller Daten oder Substantive Geben Sie einfach die Textinformationen wie in der Abbildung gezeigt ein, um das 3D-Modell zu erstellen.

Wenn Sie beispielsweise ein 3D-Modell eines Welpen erstellen und dann das Gefühl haben, dass das Muster auf dem Welpen nicht zufriedenstellend ist, müssen Sie nur die gewünschte Musterbeschreibung über die Benutzeroberfläche eingeben und Stabel ändert das Modell entsprechend Beschreibung und rendern Sie die relevanten Bilder neu.

Darüber hinaus unterstützt das Stable Animation SDK auch die Eingabe von Aktionsbefehlen, wodurch das statische 3D-Modell Ihre Aktionsbefehle direkt ausführen kann, wenn Sie beispielsweise einen fliegenden Drachen rendern und dann den Befehl „Lass den Drachen fliegen und atmen“ eingeben Feuer“, beginnt das Stable Action-Rendering des 3D-Modells.

Darüber hinaus bietet Stable auch Fotofunktionen, mit denen Benutzer eine Reihe von Parametern wie Kameraposition, Lichteffekte und Hintergrund anpassen können, um statische und dynamische Videos von 3D-Modellen aufzunehmen. Ja, jeder hat wahrscheinlich schon vermutet, dass 3D-Modellierung, 3D-Animation und andere mit der 3D-Modellierung verbundene Branchen die „Wärme“ der KI spüren werden.

Einige Internetnutzer glauben, dass die Kombination der Stable-Plattform und der Virtual-Reality-Ausrüstung zu einer dramatischen Verbesserung der Produktivität der Virtual-Reality-Ausrüstung führen könnte. Jeder sollte den Marvel-Film „Iron Man“ gesehen haben. Der Protagonist Stark im Film verfügt über ein fortschrittliches künstliches Intelligenzprogramm „Jarvis“, das Stark bei der Herstellung der Iron Man-Rüstung sehr geholfen hat.

Einer der Clips ist, dass Stark durch Dialoge direkt ein 3D-Modell eines Teils erstellt, es dann angepasst und auf die Rüstung angewendet hat. Kommt Ihnen dieser Vorgang bekannt vor? Ja, in gewissem Sinne ist dies die zukünftige Version von Stable+ChatGPT. 3D-Modelle werden direkt durch Dialog erstellt, sodass Designer das Aussehen und die Nutzungseffekte von Elementen in Virtual-Reality-Geräten direkt überprüfen können.

Die Umsetzung dieses Prozesses in reale Fotos ist gleichbedeutend mit einer Vereinfachung des zeitaufwändigsten Prüf- und Anpassungsprozesses im Produktdesign und einer erheblichen Verbesserung der Effizienz des gesamten Prozesses vom Produktdesign bis zur Implementierung. Darüber hinaus können Designer ihre Produkte vorab nutzen und erleben, indem sie die Möglichkeiten von Virtual-Reality-Geräten nutzen.

Natürlich wird im aktuellen Produktdesignprozess häufig eine ähnliche 3D-Modellsoftware zum Rendern von Szenen verwendet. Der Vorteil von Stable liegt jedoch in der Geschwindigkeit der Erstellung von Modellen, deren Anpassung und Rendern ursprünglich nur Stunden oder sogar Tage dauerte Nehmen Sie zehn. Es kann in einem Drittel oder weniger Zeit generiert werden, und die damit verbundene Effizienzsteigerung ist offensichtlich.

Mit der Verbreitung generativer KI können wir erkennen, dass KI tiefgreifende Auswirkungen auf unsere Gesellschaft, Produktion und andere Aspekte haben wird. Heute ist es ein 3D-Modell, aber was wird es morgen sein? Ich freue mich sehr darauf.

Quelle: Lei Technology Ieitech

Das obige ist der detaillierte Inhalt vonDas neue Blut der virtuellen Realität, die 3D-Modellierungsbranche, die durch KI gestärkt wird. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!