「映像分野のミッドジャーニー」! AIビデオ生成の新人、第2世代の内部ベータ作業が流出、ネチズンは現実的すぎると批判
Gen-2は、一言で大ヒット作を撮影できると主張するAIビデオ生成ツールで、その正体を現し始めています。
ある Twitter ブロガーが、内部テストの資格を得るために先導者となりました。
これは、彼が「バーでインタビューを受けている、形の良い、または対称的な男性」というプロンプトワードを使用して生成した結果です:
私は、黒いシャツを着た男性が彼をまっすぐに見ているのを見ました相手と話しているとき、その目や表情には真剣さと率直さが表れており、向かいの人も時折同意してうなずきます。
ビデオ全体が非常にまとまっており、画質も非常に鮮明なので、一見すると本物のインタビューのように感じられます。
同じプロンプトワード生成の別のバージョンも悪くありません:
今回はカメラがより近く、背景がより現実的で、キャラクターは依然として表情豊かです。
この一連の作品を読んだ後、一部のネチズンは次のように叫びました。
すごいですね、テキスト プロンプトに頼るだけでこのような結果が得られるなんて!
率直に次のように言う人もいます。
これは、ビデオ分野における Midjourney の登場です。
ブロガーによる Gen-2 の実際のテスト
このブロガーは Nick St. Pierre という名前で、AI で作成した作品を Twitter で共有することを専門としています。
冒頭で見られた写実的なスタイルに加えて、彼は一連の第 2 世代 SF 作品も発表しました。
例: 「宇宙飛行士は宇宙を旅する」:
「武装した兵士が宇宙船の廊下を走り、黒い影が背後の壁を破壊する」彼" :
"人間動物園のマイクロチップを食べるロボットの家族":
"人型ロボットの軍隊が凍った平原に植民地化する":
(ゲーム・オブ・スローンズで万里の長城を攻撃するホワイト・ウォーカー軍のような勢いです...)
「地球最後の男が見ていた」侵略する宇宙船が東京上空に着陸します。」:
……
上記のすべては、言及する必要がなく、ただ 1 つのプロンプトの単語だけで完了できます。他の写真やビデオへ。
この一連の SF の効果は「面接を受けるバーの男」の効果にわずかに劣りますが、魔法のようなものは、AI 画像生成モデルの「混沌とした」風味に匹敵することができるということです。ほぼ同じですね、当時の安定普及などAIの影が見える気がします。
たとえば、Nick St. Pierre 氏は次のように述べています:
Gen-2 はまだ初期段階にあり、将来的には間違いなく改善されます。
また、内部テストの資格を持った他の人によってテストされた結果がインターネット上でいくつか見つかりました:
AIGC 分野の新参者として、その反復速度と品質も非常に速いです:
Gen-1 バージョンは 2 月に誕生したばかりで、編集用のビデオがすでにある場合にのみ使用できます;
Gen-2 では、プロンプト ワードとしてテキストと画像を使用してビデオを直接生成できるようになりました。
公式にはこれを「生成 AI の次のステップ」と呼んでおり、スローガンも非常に横暴です:
言って、見てください。 (あなたがそれを伝えることができる限り、私はあなたにそれを見てもらうことができます)
Gen-2 のアップデートにより、8 つの主要な機能が一度に提供されます:
ベンチャー ビデオ、テキスト リファレンス画像生成 ビデオ、静止画像からビデオへの変換、ビデオ スタイル転送、ストーリーボード (Storyboard)、マスク (歩いている白い犬をダルメシアンに変えるなど)、レンダリングとパーソナライゼーション (首を振る男を数秒でカメに変えるなど) ))。
AI 絵画のようなその外観により、人々は映画やテレビ、ゲーム、マーケティングの分野に隠された大きな変化を知ることができます。
開発会社も注目に値します。それは Runway です。
ランウェイは2018年に設立され、「インスタント・ユニバース」の特殊効果の技術支援や安定拡散(有望株)の開発にも参加してきました。
ヒント: Gen-1 はすでにプレイできます (125 の機会を使い果たした後は、月々の支払いのみ可能です)。Gen-2 はまだ正式にリリースされていません。公共。 。
Gen シリーズに加えて、マイクロソフト アジア研究所は最近、テキストに基づいて超長いビデオを生成できる AI NUWA-XL もリリースしました。
わずか 16 個の簡単な説明で、11 分間のアニメーションを作成できます。
少し前に進め、息子よ、 Gen-2 がリリースされたのと同じ日に、Alibaba Damo Academy も 17 億のパラメーターを備えたテキストからビデオへの AI をオープンソース化しました:
その効果は江おばさんのものです:
画像生成だけでなく、映像分野も活発になることが予想されます。
ああ、では、次の大量 AI カーニバルの波は来るのでしょうか?
参考リンク:
[1] https://www.php.cn/link/4d7e0d72898ae7ea3593eb5ebf20c744
[2] https://www.php.cn/link/e00944d55e6432ccf20f9fda2492b6fd
[3] https://www.php.cn/link/ce653013fadbb2ff27530d3de3790f1b
[4] https://www.php.cn/link/6e3adb1ae0e02c934766182313b6775d
[5] https://www . php.cn/link/b9b72b29352f3764ea4dec130772bd9d
[6] https://www.php.cn/link/79d37fb2893b428f7ea4ed3b07a84096
以上が「映像分野のミッドジャーニー」! AIビデオ生成の新人、第2世代の内部ベータ作業が流出、ネチズンは現実的すぎると批判の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

ホットAIツール

Undresser.AI Undress
リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover
写真から衣服を削除するオンライン AI ツール。

Undress AI Tool
脱衣画像を無料で

Clothoff.io
AI衣類リムーバー

AI Hentai Generator
AIヘンタイを無料で生成します。

人気の記事

ホットツール

メモ帳++7.3.1
使いやすく無料のコードエディター

SublimeText3 中国語版
中国語版、とても使いやすい

ゼンドスタジオ 13.0.1
強力な PHP 統合開発環境

ドリームウィーバー CS6
ビジュアル Web 開発ツール

SublimeText3 Mac版
神レベルのコード編集ソフト(SublimeText3)

ホットトピック









従来のコンピューティングを超える能力を備えているだけでなく、より低コストでより効率的なパフォーマンスを実現する人工知能モデルを想像してみてください。これは SF ではありません。世界で最も強力なオープンソース MoE モデルである DeepSeek-V2[1] が登場しました。 DeepSeek-V2 は、経済的なトレーニングと効率的な推論の特徴を備えた強力な専門家混合 (MoE) 言語モデルです。これは 236B のパラメータで構成されており、そのうち 21B は各マーカーをアクティブにするために使用されます。 DeepSeek67B と比較して、DeepSeek-V2 はパフォーマンスが優れていると同時に、トレーニング コストを 42.5% 節約し、KV キャッシュを 93.3% 削減し、最大生成スループットを 5.76 倍に高めます。 DeepSeek は一般的な人工知能を研究する会社です

AI は確かに数学を変えつつあります。最近、この問題に細心の注意を払っている陶哲軒氏が『米国数学協会会報』(米国数学協会会報)の最新号を送ってくれた。 「機械は数学を変えるのか?」というテーマを中心に、多くの数学者が意見を述べ、そのプロセス全体は火花に満ち、ハードコアで刺激的でした。著者には、フィールズ賞受賞者のアクシャイ・ベンカテシュ氏、中国の数学者鄭楽軍氏、ニューヨーク大学のコンピューター科学者アーネスト・デイビス氏、その他業界で著名な学者を含む強力な顔ぶれが揃っている。 AI の世界は劇的に変化しています。これらの記事の多くは 1 年前に投稿されたものです。

今月初め、MIT やその他の機関の研究者らは、MLP に代わる非常に有望な代替案である KAN を提案しました。 KAN は、精度と解釈可能性の点で MLP よりも優れています。また、非常に少数のパラメーターを使用して、多数のパラメーターを使用して実行する MLP よりも優れたパフォーマンスを発揮できます。たとえば、著者らは、KAN を使用して、より小規模なネットワークと高度な自動化で DeepMind の結果を再現したと述べています。具体的には、DeepMind の MLP には約 300,000 個のパラメーターがありますが、KAN には約 200 個のパラメーターしかありません。 KAN は、MLP が普遍近似定理に基づいているのに対し、KAN はコルモゴロフ-アーノルド表現定理に基づいているのと同様に、強力な数学的基礎を持っています。以下の図に示すように、KAN は

Boston Dynamics Atlas は正式に電動ロボットの時代に突入します!昨日、油圧式アトラスが歴史の舞台から「涙ながらに」撤退したばかりですが、今日、ボストン・ダイナミクスは電動式アトラスが稼働することを発表しました。ボストン・ダイナミクス社は商用人型ロボットの分野でテスラ社と競争する決意を持っているようだ。新しいビデオが公開されてから、わずか 10 時間ですでに 100 万人以上が視聴しました。古い人が去り、新しい役割が現れるのは歴史的な必然です。今年が人型ロボットの爆発的な年であることは間違いありません。ネットユーザーは「ロボットの進歩により、今年の開会式は人間のように見え、人間よりもはるかに自由度が高い。しかし、これは本当にホラー映画ではないのか?」とコメントした。ビデオの冒頭では、アトラスは仰向けに見えるように地面に静かに横たわっています。次に続くのは驚くべきことです

目標検出は自動運転システムにおいて比較的成熟した問題であり、その中でも歩行者検出は最も初期に導入されたアルゴリズムの 1 つです。ほとんどの論文では非常に包括的な研究が行われています。ただし、サラウンドビューに魚眼カメラを使用した距離認識については、あまり研究されていません。放射状の歪みが大きいため、標準のバウンディング ボックス表現を魚眼カメラに実装するのは困難です。上記の説明を軽減するために、拡張バウンディング ボックス、楕円、および一般的な多角形の設計を極/角度表現に探索し、これらの表現を分析するためのインスタンス セグメンテーション mIOU メトリックを定義します。提案された多角形モデルの FisheyeDetNet は、他のモデルよりも優れたパフォーマンスを示し、同時に自動運転用の Valeo 魚眼カメラ データセットで 49.5% の mAP を達成しました。

テスラのロボット「オプティマス」の最新映像が公開され、すでに工場内で稼働可能となっている。通常の速度では、バッテリー(テスラの4680バッテリー)を次のように分類します:公式は、20倍の速度でどのように見えるかも公開しました - 小さな「ワークステーション」上で、ピッキング、ピッキング、ピッキング:今回は、それがリリースされたハイライトの1つビデオの内容は、オプティマスが工場内でこの作業を完全に自律的に行い、プロセス全体を通じて人間の介入なしに完了するというものです。そして、オプティマスの観点から見ると、自動エラー修正に重点を置いて、曲がったバッテリーを拾い上げたり配置したりすることもできます。オプティマスのハンドについては、NVIDIA の科学者ジム ファン氏が高く評価しました。オプティマスのハンドは、世界の 5 本指ロボットの 1 つです。最も器用。その手は触覚だけではありません

FP8 以下の浮動小数点数値化精度は、もはや H100 の「特許」ではありません。 Lao Huang は誰もが INT8/INT4 を使用できるようにしたいと考え、Microsoft DeepSpeed チームは NVIDIA からの公式サポートなしで A100 上で FP6 の実行を開始しました。テスト結果は、A100 での新しい方式 TC-FPx の FP6 量子化が INT4 に近いか、場合によってはそれよりも高速であり、後者よりも精度が高いことを示しています。これに加えて、エンドツーエンドの大規模モデルのサポートもあり、オープンソース化され、DeepSpeed などの深層学習推論フレームワークに統合されています。この結果は、大規模モデルの高速化にも即座に影響します。このフレームワークでは、シングル カードを使用して Llama を実行すると、スループットはデュアル カードのスループットの 2.65 倍になります。 1つ

前に書かれたプロジェクトのリンク: https://nianticlabs.github.io/mickey/ 2 枚の写真が与えられた場合、それらの写真間の対応関係を確立することで、それらの間のカメラのポーズを推定できます。通常、これらの対応は 2D 対 2D であり、推定されたポーズはスケール不定です。いつでもどこでもインスタント拡張現実などの一部のアプリケーションでは、スケール メトリクスの姿勢推定が必要なため、スケールを回復するために外部深度推定器に依存します。この論文では、3D カメラ空間でのメトリックの対応を予測できるキーポイント マッチング プロセスである MicKey を提案します。画像全体の 3D 座標マッチングを学習することで、相対的なメトリックを推測できるようになります。
