ワンクリックですべてが動きます！ Tencent Hunyuan が清華大学および香港科技大学と提携し、Tuxing ビデオ モデル「Follow Your Click」を開始

編集者 | 燕正プロデュース

| 51CTO Technology Stack (WeChat ID: blog51cto)

3 月 15 日、Tencent Hunyuan と清華大学、香港科技大学は共同で新しいTushengビデオモデル「Follow-Your-Click」を立ち上げ、モデルに入力された画像に基づいて、対応する領域をクリックし、いくつかのプロンプトワードを追加するだけで、元の静的な領域が作成されます。画像の移動キーをビデオに変換します。

現在の土生ビデオ大規模モデルでは、一般的な生成方法はユーザーを必要とするだけでなく、プロンプトワードは移動範囲を説明するとともに、移動指示の詳細な説明を提供する必要があり、これは複雑なプロセスです。さらに、生成されるエフェクトの観点から見ると、既存の画像生成ビデオ技術では、画像の特定の部分を動かす制御が不足しており、生成されたビデオは画像上の特定の領域ではなくシーン全体を動かす必要があることが多く、そのための機能が不足しています。正確さと柔軟性、何が欠けているのか。

これらの問題を解決するために、Tencent Hunyuan Large Model Team、清華大学、香港科技大学の共同プロジェクト チームは、より実用的で制御可能な画像変換システムを提案しました。ビデオ生成モデル Follow-Your-Click は、より便利なインタラクションをもたらし、「写真を 1 回クリックすると、すべてが動きます」も実現します。

#画像からビデオへの生成テクノロジーは、映画コンテンツ制作、拡張現実、ゲーム制作などの多くの業界で使用されています。 AIGC は幅広い応用の可能性を秘めており、2024 年に最も注目される AI テクノロジーの 1 つです。

この共同プロジェクト チームの Tencent Hunyuan 大規模モデル チームは、マルチモーダル テクノロジーの研究と探索を継続しており、業界をリードするビデオ生成機能を備えていると理解されています。以前、Tencent Hunyuan Model は技術パートナーとして、『人民日報』のオリジナルビデオ「So Many Beautiful Rivers and Mountains」の作成をサポートし、中国の美しい川と山の絶妙なビデオクリップを生成し、強力なコンテンツ理解、論理的推論、および分析を実証しました。写真 生成能力。

紙のリンク: https://arxiv.org/abs/2403.08268

Github: https://follow-your-click.github.io/

以上がワンクリックですべてが動きます！ Tencent Hunyuan が清華大学および香港科技大学と提携し、Tuxing ビデオ モデル「Follow Your Click」を開始の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。