2022 淘宝創造祭 3D ライブ仮想キャンプ技術のハイライトが明らかに

2022 年 8 月 24 日に、タオバオ メーカー フェスティバルがデビューします!次世代のインターネット没入型ショッピング体験を探求するために、このクリエーションフェスティバルでは、オフラインの広州交易会展示ホールに20,000平方メートルのパノラマの「フューチャーキャンプ」を建設することに加えて、初めてオンラインの仮想インタラクティブスペースも立ち上げました。オンラインで数万人が同時に参加できる「3D Crazy」 街づくりフェスティバル バーチャルキャンプ」。

3D バーチャル キャンプでは、ユーザーは高解像度のゲーム テクスチャを軽量で体験し、仮想キャラクターとして「3D 人物とグッズ ヤード」の世界に参加し、プレイヤーや 3D グッズと対話できます。遊びと創造を愛する新世代の消費者グループの要求に応え、革新的なテクノロジーで新しい消費者体験をもたらします。

3D ライブ仮想キャンプの体験と技術的なハイライトを見てみましょう:

軽量裸眼 3D「リアル ゲーム」

3D ゲームを気に入ったら、クライアントは数ギガバイトをダウンロードしましたが、新しいゲームをプレイしたいときにアンインストールする必要があり、メモリを消費しすぎました。 Creation Festival の仮想キャンプでは、裸眼 3D、インタラクティブ、ライブ ストリーミング、高解像度の「ゲーム」をすぐに読み込むことができ、購入することもでき、タオバオ アプリは「まったく大きくなっていません」携帯電話へのロード速度は「シュー」です~

▐ 技術ハイライト: クラウド コストの課題

モバイルでの 3D ゲーム アプリケーションの従来の開発最終テストで数十、数百メガバイトのゲーム エンジンを統合するには、数ギガバイトのマテリアル リソースをダウンロードする必要がありますが、これは現時点でタオバオ アプリでは非現実的です。クラウド レンダリングを使用すると、この問題をうまく解決できます。クラウドの強力な GPU の助けを借りて、ユーザーは高解像度で複雑なシーンのレンダリングを完了できます。ユーザーは、大きなリソース ファイルをダウンロードしたり、コンテンツをインストールしたりする必要はありません。必要なのは、リアルタイムでレンダリングされたメディアを再生します。

しかし、ここでの最大の問題は、クラウド レンダリング マシンのコストです。クラウド レンダリング マシンのコストを削減するために、クラウド レンダリングに加えて、モデル サーフェスの削減、DP マージ、テクスチャの最適化、ビデオ素材の解像度の削減などのパフォーマンスの最適化戦略も実行します。マシンのスケジューリングに関しては、マシンの使用率を最大化するために、ビジネス シナリオに基づいて時間ベースの動的な拡張および縮小戦略が開発されました。

3D 人物と 3D 製品が 3D 仮想世界で初めて出会う

かつて「淘宝生活」で着飾った 3D ユーザーが初めて小さな家から「歩いて」出ました時間が来て、Creation Festivalのライブ3Dバーチャルキャンプに来ました。ここでは、自由にジャンプしたり、たき火を起こしたり、3D 製品を閲覧したり、販売者のライブ ブロードキャストを視聴したり、プレイヤーと交流したりすることができます。 3D 人物、3D 製品、3D 環境を組み合わせて、臨場感あふれる素晴らしいキャンプ アドベンチャー体験を提供します。

▐ 技術的なハイライト: 人と物資のヤードの建設と交流

人々間の交流。 Taobao Life の 3D キャラクターを 3D 仮想世界に配置するには、まず一定のアセット変換とレンダリングのコストが必要です。ユーザーがキャンプ内を走り回るには、ユーザーの位置がリアルタイムで同期されます。ユーザーのリアルタイムローミングのために、フレーム同期技術を使用して、ユーザーの位置情報を一定の頻度で更新します。理想的にはユーザーはスタックを感じませんが、ネットワークの混雑により、必然的にフレーム間のジッターが発生します。同期時間が一定の間隔を超えると、ジャンプの原因になります。この欠点を補うために、キャラクターの描画時に動き補償アルゴリズムを使用していますが、これは簡単に言うと、アルゴリズムのシミュレーションを使用して、ユーザーの位置の動きの遷移をより滑らかにします。同時に、インタラクティブデータの同期に関しては、AOIグリッドアルゴリズムが採用され、同じ画面上の複数人のデータ同期の問題を解決します。これにより、仮想世界で 3D キャラクターがよりスムーズに動作するようになります。

#人と製品の間のインタラクション。ユーザーが仮想シーン内で 3D 製品の詳細を自由に表示することは簡単ではありませんが、モバイル レンダリングとクラウド レンダリングの 2 つのオプションから選択できます。タオバオでは、モバイル レンダリングにも比較的成熟したソリューションがあります。残念ながら、モバイル レンダリング エンジンとクラウド レンダリング エンジンは同じセットではないため、同じ製品モデルを普遍的に使用することはできません。同時に、モデルの動的ダウンロード、表面縮小問題点としては、これらのデメリットを回避するために、やはりクラウドレンダリングソリューションを選択しましたが、カメラの視点を動的に切り替え、ユーザーのインタラクティブな指示にリアルタイムで応答することで、回転するような体験を実現することができます。ズームして 3D 製品を視聴します。

1080P 解像度と優れた高解像度品質

モバイル アプリでページ ミニゲームを試してみたところ、モザイクのようにぼやけてしまいました。 . 走ったり、ジャンプしたり、フレームを落としたりしました。 Creation Festival の新しい 3D バーチャル キャンプは、高解像度の画像、スムーズなエフェクトを備え、ステージ照明はあなたを「スター」として動的に追跡できます~

▐ 技術的なハイライト: コンテンツ制作とクラウド レンダリングのリアルタイム送信

クラウドでは、リアルタイムの画像レンダリングに Unreal Engine を使用し、それを動的なカメラの動き、動的なステージ照明、マルチビュー キャラクターやパーティクル エフェクトなどのテクノロジーにより、画像がよりクールに見え、ユーザー インタラクションの感覚がより強くなります。ユーザーの携帯電話に高精細な映像を伝送するには、画質、遅れ、遅延のバランスを総合的に考慮する必要があり、タオバオとアリババクラウドが共同で構築した伝送ネットワーク「GRTN」と自社が構築した伝送網を活用しています。 -開発されたエンコードおよびデコードアルゴリズムにより、画質の鮮明さを最大限に確保できます。

インタラクティブな仮想画面はフリーズしません

淘宝網アンカーの生放送ルームで「3、2、1、つかみ始めろ!」とカウントダウンしながらウルトラのスリルを感じたことがあるでしょう。 -低遅延のフラッシュ販売。ただし、画面の外にいるあなたは、インタラクションを通じてライブブロードキャストルームのホストの行動に直接介入することはできません。 3Dバーチャルキャンプでは、踊って挨拶したり、加盟店の3D商品をクリックしたり、お気に入りのアンカーの説明を見たりすることができ、まさに「同一フレーム内で加盟店とアンカーとコミュニケーション」が可能です。

▐ 技術ハイライト: フルリンクの超低遅延

非干渉画像伝送とは異なり、超低遅延と滑らかさがインタラクティブに実現されます。経験上、ユーザー指示のアップストリーム化、リアルタイム画像のレンダリングを完了し、レンダリングされた画像をユーザーの携帯電話に 100 ミリ秒以内に返す必要があります。まず、ユーザーのマシン、ネットワーク、アクセスポイントの状況を総合的に考慮して、ユーザーに最も近いプッシュノードを動的に選択し、クラウドプッシュ戦略（定義やエンコード方式の選択を含む）を調整する必要があります。第 2 に、送信プロセス中に、リンク全体の遅延が適切な位置に達し、最終的には仮想的な相互作用が達成されるように、リアルタイム帯域幅フィードバック、FEC、動的バッファなどの弱いネットワーク制御戦略を使用してネットワーク ジッターに対処する必要があります。スムーズなインタラクティブなエクスペリエンスを保証します。

結論

今回のCreation Festival 3Dバーチャルキャンプは、タオバオの仮想インタラクティブ空間「3D Crazy City」シリーズ初のオンラインの試みです。次に、クラウド リアルタイム レンダリングと XR/CG テクノロジーを組み合わせて、仮想シーンのカスタマイズを実現し、大規模なリアルタイム ユーザー インタラクションをサポートし、より没入型のインタラクティブ エクスペリエンスを消費者に提供します。

以上が2022 淘宝創造祭 3D ライブ仮想キャンプ技術のハイライトが明らかにの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。