Ein weiterer Spieler auf Sora-Niveau kommt auf die Straße! Wir haben es mit Sora und Keling verglichen.

Als Sora nicht auftauchte, nutzten die Gegner von OpenAI ihre Waffen, um die Straßen zu zerstören.

Sora wird wirklich gestohlen, wenn es nicht zur Verwendung geöffnet ist!

Heute hat das Startup Luma AI aus San Francisco einen Trumpf ausgespielt und eine neue Generation des KI-Videogenerierungsmodells Dream Machine auf den Markt gebracht. Kostenlos und für alle verfügbar.

Berichten zufolge kann dieses Modell hochwertige, realistische Videos basierend auf einfachen Textbeschreibungen generieren, mit vergleichbaren Effekten wie Sora.

Sobald die Nachricht bekannt wurde, strömten zahlreiche Benutzer auf die offizielle Website, um es auszuprobieren.

Obwohl der Beamte behauptet, dass das Modell 120 Videobilder in nur zwei Minuten erzeugen kann, warten viele Benutzer aufgrund des starken Verkehrsaufkommens stundenlang auf der offiziellen Website.

Barkley Dai, Leiter Produktwachstum bei Luma, musste auf Discord posten, um zu erklären:

„Wir sehen uns derzeit einer enormen Nachfrage gegenüber und arbeiten hart daran, unsere Verarbeitungskapazitäten zu erhöhen. Alle Aufgaben zur Videoerstellung werden erledigt.“ beibehalten, genau wie nötig. Warten Sie eine Weile in der Warteschlange, sobald wir die Verarbeitungskapazität erhöhen, werde ich Sie hier informieren!“

Wie effektiv ist die Dream Machine?

Einige Internetnutzer sagten, dass Luma derzeit der neue König im Bereich KI-Videos sei.

Einige Internetnutzer sagten: „Wir brauchen Sora nicht mehr!“ Ich frage mich, was OpenAI dachte, nachdem es das gesehen hatte.

Einige Internetnutzer beschwerten sich jedoch darüber, dass das System nach der Erstellung von 8 Videos die Meldung „Maximale Nutzungsbeschränkung überschritten“ meldete und nicht erklärte, wie lange sie warten sollten, bevor sie neue Videos erstellten.

Netizens werden verrückt

In den letzten Tagen ist der KI-Videokreis verrückt geworden. Du kannst singen und ich werde erscheinen.

Zuerst startete Kuaishou Keling eine geschlossene Beta, bei der sich mehr als 50.000 Leute anstellten. Dann startete Luma sein Killer-Feature, Dream Machine, das für alle kostenlos ist.

Im Vergleich zu anderen KI-Videomodellen weist Dream Machine die folgenden Eigenschaften auf:

1. Schnell, 120 Bilder können in 120 Sekunden generiert werden;

2 Fotografiefähigkeiten auf Filmniveau und dramatische Spannung; starke Charakterkonstanz und die Fähigkeit, die physische Welt zu simulieren;

4.

Luma-Beamte und Internetnutzer haben nacheinander zusammengearbeitet, um ein wunderbares visuelles Fest zu präsentieren.

Dieses textgenerierte Video zeigt beispielsweise ein Auto, das die Straße entlang rast. Ob beim Fahren oder bei Kameraübergängen, alles ist flüssig und lebensecht.

Eine Kamera tief am Boden verfolgt eine Gruppe kleiner Hamster tief in ihren Höhlen. Diese Szene ähnelt Soras Ameisenvideo, aber Dream Machine verwendet eine Tusheng-Videofunktion, die allgemein als „Kissen“ bekannt ist. Ein kahlköpfiger Mann mit orangefarbenem T-Shirt bewegt sich durch den Raum. Die Lebensechtheit der Figur und die Bildkomposition sind mit denen von Blockbustern vergleichbar.

Dies ist eine Aufnahme einer Ruinenszene. Die ausrangierten Seile, Holzbretter am Boden und die Graffiti an den Wänden wirken natürlich und realistisch.Auf dem Bild tanzt eine junge Frau mit wehendem Rock, ihre Bewegungen sind sanft und fließend, genau wie in einem Luxus-Werbeblockbuster. Der einzige Nachteil besteht jedoch darin, dass sich Rock und Haare verformen. Einige Internetnutzer haben sogar eine Actionszene einer tödlichen Schießerei erstellt. Netizen @ai_mov_director hat damit auch einen einminütigen Spielfilm erstellt – „Break The Tie“. Im Hinblick auf die Wahrung der Charakterkonsistenz verfügt Dream Machine über zwei Pinsel.

Neben der Erstellung realistischer Videos kann Dream Machine auch verschiedene Stile ausprobieren.

Zum Beispiel japanischer Anime-Stil: Disney-Stil:

Insgesamt ist Dream Machine lobenswert in Bezug auf Videotreue und Glätte, aber es ist nicht perfekt.

Julien Vallee, der Werbespots für Apple, Samsung, Google und andere bekannte Marken gedreht hat, sagte, dass Dream Machine natürliche Kamerabewegungen imitieren kann, insbesondere bei Aufnahmen aus der Hand, der Effekt sei sehr realistisch. Allerdings erfordert es, wie bei anderen Modellen auch, einige Versuche und Irrtümer, um großartige Aufnahmen zu machen.

Vincent Video Circle Battle

2024 ist ein Wahljahr und OpenAI hat Sora versteckt, um keinen Ärger zu verursachen.

Als Soras „Tausende Anrufe“ nicht herauskamen, nutzten die Gegner ihre großen Waffen, um die Straßen zu zerstören.

Der KI-Videobereich unterliegt einem rasanten Wandel.

Da sowohl Dream Machine als auch Keling unter dem Motto „gegen Sora antreten“ stehen, bauen wir einfach eine Arena auf und lassen Dream Machine, Keling und Sora auf derselben Bühne gegeneinander antreten.

Prompt 1: fotorealistisches Nahaufnahmevideo von zwei Piratenschiffen, die in einer Tasse Kaffee gegeneinander kämpfen.

Sora:

Traummaschine:

Keling:

Prompt 2: Nächtliche Aufnahmen von Einsiedlerkrebsen, die Glühbirnen als Muscheln verwenden.

Chinesisches Aufforderungswort 2: Sojourn Night Aufnahme einer Krabbe mit einer Glühbirne als Schale.

Sora:

Traummaschine:

Keling:

Eingabeaufforderung 3: Makroaufnahme eines Blattes, das winzige Züge zeigt, die sich durch seine Adern bewegen.

Sora：

Dream Machine：

Keling：

Prompt 4: Eine stilvolle Frau geht eine Straße in Tokio entlang, die mit warm leuchtenden Neon- und animierten Stadtschildern gefüllt ist s Sie trägt eine schwarze Lederjacke, ein langes rotes Kleid und schwarze Stiefel und trägt eine Sonnenbrille und roten Lippenstift. Die Straße ist feucht und spiegelnd Fußgänger laufen umher.

Chinesisches Aufforderungswort 4: Eine modische Frau geht durch die Straßen von Tokio, die voller warmer Neonlichter und lebhafter Stadtschilder sind. Sie trug eine schwarze Lederjacke, einen langen roten Rock, schwarze Stiefel und hielt eine schwarze Handtasche in der Hand. Sie trägt eine Sonnenbrille und roten Lippenstift. Sie ging mit Selbstvertrauen und Leichtigkeit. Die Straßen sind nass und reflektierend, wodurch ein Spiegeleffekt aus farbigen Lichtern entsteht. Viele Fußgänger liefen herum.

Sora:

Traummaschine:

Keling:

Eingabeaufforderung 5: Archäologen entdecken einen gewöhnlichen Plastikstuhl in der Wüste und graben ihn mit größter Sorgfalt aus .

Chinesischer Tipp 5: Archäologen haben in der Wüste einen gewöhnlichen Plastikstuhl gefunden. Sie haben ihn sorgfältig ausgegraben und entstaubt.

Sora:

Dream Machine:

Keling:

Prompt 6: Ein Computerhacker Labrador Retriever, der ein schwarzes Kapuzensweatshirt trägt, sitzt davor der Computer mit dem Glanz von Der Bildschirm erscheint auf dem Gesicht des Hundes, während er sehr schnell tippt.

Chinesisches Aufforderungswort 6: Ein Computerhacker Labrador Retriever in einem schwarzen Kapuzenpullover sitzt vor einem Computer und während er schnell tippt, fällt der Bildschirm auf das Gesicht des Hundes .

Sora:

Dream Machine:

Keling:

Was ist der Ursprung dieses von NVIDIA geführten Unternehmens?

Dream Machine ist populär geworden und das Unternehmen dahinter, Luma AI, hat ebenfalls das Rampenlicht gestohlen.

Luma AI wurde 2021 gegründet und war zunächst ein Technologieunternehmen mit Fokus auf die Generierung von 3D-Inhalten.

CEO Amit Jain war Computer-Vision-Systemingenieur bei Apple und CTO Alex Yu war Doktorand an der University of California, Berkeley (er gab seinen Doktortitel auf, um Luma AI zu gründen). Die beiden haben Erfolge in den Bereichen 3D-Vision, maschinelles Lernen, Echtzeitgrafik und anderen Bereichen erzielt.

Es wird berichtet, dass dieses Unternehmen mehrere Finanzierungsrunden durchlaufen hat.

Die Finanzierung der Serie A wurde von Amplify Partners, Nventures (Nvidias Investmentarm) und General Catalyst geleitet und brachte insgesamt 20 Millionen US-Dollar ein; die Finanzierung der Serie B wurde von Andreessen Horowitz und Nvidia, den führenden Risikokapitalfirmen des Silicon Valley, geleitet , wodurch 43 Millionen US-Dollar gesammelt wurden. Bis heute hat das Unternehmen mehr als 70 Millionen US-Dollar an Finanzmitteln eingesammelt und wird auf 200 bis 300 Millionen US-Dollar geschätzt.

Letzten November hat Luma AI das Vincent 3D-Modell Genie auf dem Discord-Server veröffentlicht. Später wurde Version 1.0 veröffentlicht, die die Zeichenzeit von mehr als 20 Sekunden auf weniger als 10 Sekunden verbesserte.

Unerwartet wechselte Luma AI dieses Mal direkt in den Bereich AI-Video.

Laut der offiziellen Website besteht das Kernteam von Luma AI nur aus 34 Personen, und den Namen nach zu urteilen, sind 5 davon Chinesen.

Mitbegründer und CTO Alex Yu, schloss 2021 sein Studium an der University of California, Berkeley ab. Während dieser Zeit führte er zusammen mit Professor Angjoo Kanazawa am Berkeley Artificial Intelligence Research Laboratory NeRFs-Forschung durch.

Angela Dong schloss im selben Jahr ihr Studium an der University of California in Berkeley ab. Sie absolvierte ein Praktikum bei Unternehmen wie Drive.ai, Lyft Level 5 und Zipline und kam dann als Simulationsingenieurin zu Cruise, wo sie sich auf die Erstellung synthetischer Daten konzentrierte für das Wahrnehmungsmodelltraining. Derzeit arbeitet sie als Machine Learning Engineer bei Luma.

Chefwissenschaftler Jiaming Song schloss sein Studium an der Tsinghua University mit einem Bachelor-Abschluss und einem Master- und Doktorgrad an der Stanford University ab. Bevor er zu Luma AI kam, war er als Forschungswissenschaftler im NVIDIA-Forschungsteam für Lernen und Wahrnehmung und im Forschungsteam für Deep Imagination tätig.

Darüber hinaus sind Quei-An Chen und Paul Yoo als Forschungswissenschaftler bei Luma tätig.

(Quei-An Chen links, Paul Yoo rechts)

Unter ihnen ist Quei-An Chen stark im NeRF-Bereich engagiert und durch die Einführung vieler beliebter Open-Source-Projekte berühmt geworden auf Github. Wie Neural Scene Flow Fields und Instant-NGP. Bevor er zu Luma kam, arbeitete er an mehreren 3D-Vision-Technologieprojekten bei DENSO und LINE.

^Link:

^{https://lumalabs.ai/dream-machine/creations}

Das obige ist der detaillierte Inhalt vonEin weiterer Spieler auf Sora-Niveau kommt auf die Straße! Wir haben es mit Sora und Keling verglichen.. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!