HANDS@ECCV24 Hand Symposium and Challenge, kami dengan tulus menjemput penyertaan dan penyertaan dalam pertandingan

Pengenalan

TANGAN ke-8 akan diadakan di ECCV24 (petang pada 30 September, Milan), termasuk bengkel dan cabaran. HANDS akan menyediakan platform untuk penyelidik dan pengamal tangan yang berkaitan untuk berkongsi kerja mereka dan membincangkan potensi kerjasama. Tujuh edisi HANDS yang lalu juga telah mencapai kejayaan besar. Dokumen ini adalah terjemahan, sila rujuk laman web rasmi untuk maklumat.

Halaman utama HANDS@ECCV24: https://www.php.cn/link/73d4d7b15bfefa13c4a035fa16bb99ed

Seminar dan penyerahan tangan: Arahan seminar yang berkaitan dengan kerja tangan dan jemputan pakar dalam bidang yang berkaitan -pelaporan tepi. Khususnya, kami dengan ikhlas menjemput penyerahan artikel panjang yang berkaitan.

Cabaran Tangan: Berdasarkan set data besar tangan terkini AssemblyHands, ARCTIC, OakInk2 dan UmeTrack, cabaran itu menganjurkan berbilang trek dan berharap dapat mempromosikan pembangunan algoritma berkaitan. Serahan kertas asi, Pembinaan Semula tangan , interaksi objek tangan, analisis gerak isyarat, penjanaan gerak isyarat, pengecaman bahasa isyarat, kawalan robot dan rampasan robot, dsb.

Peraturan penyerahan: Artikel panjang tertakluk kepada satu pusingan semakan dua buta tanpa peringkat sanggahan, dan menerima pakai templat dan sekatan rasmi ECCV24 Selepas kemasukan, ia akan diterbitkan dalam prosiding persidangan ECCV24. Kami juga menerima penyerahan abstrak dan poster yang panjang. Abstrak dan poster panjang tidak akan diterbitkan, tetapi memudahkan komunikasi dan promosi kerja berkaitan. Lihat laman web rasmi untuk butiran.

Cabaran

Kami menganjurkan 4 cabaran trek berdasarkan set data tangan besar terkini AssemblyHands, ARCTIC, OakInk2 dan UmeTrack. Pemenang cabaran akan menerima ganjaran yang sepadan dan mempromosikan kaedah mereka di bengkel. Set data kini dibuka untuk dimuat turun dan semua orang dialu-alukan untuk mengambil bahagian. Untuk menyertai pertandingan, sila daftar di laman web rasmi terlebih dahulu, dan sila patuhi peraturan yang berkaitan semasa cabaran. Sila beri perhatian kepada trek yang berkaitan untuk titik masa tertentu. Untuk maklumat lanjut, sila lihat tapak web rasmi cabaran:

https://www.php.cn/link/73d4d7b15bfefa13c4a035fa16bb99edchallenge2024.html

estimasi berdasarkan penilaian pada AssemblyHand

sekiranya Cabaran menyediakan versi yang diperluaskan bagi AssemblyHands Challenge dalam HANDS2023. Memandangkan set kepala AR/VR berbilang paparan (seperti Apple Vision Pro, Meta Quest, dll.) mendapat perhatian yang semakin meningkat, kami memanjangkan bidang anggaran pose tangan 3D daripada tetapan paparan tunggal kepada berbilang paparan. Dalam cabaran ini, peserta perlu mengoptimumkan model pra-latihan yang disediakan tanpa pengawasan dan menyesuaikannya kepada berbilang tetapan dwi-pandangan, yang parameter kamera tidak diketahui. Khususnya, kami membina trek menggunakan data berbilang paparan daripada dataset AssemblyHands.

Cabaran pembinaan semula 3D interaksi dua tangan tangan objek berasaskan ARCTIC

Manusia berinteraksi dengan pelbagai objek setiap hari, jadi tangkapan 3D keseluruhan interaksi ini adalah penting untuk pemodelan tingkah laku manusia. Memandangkan kami secara semula jadi berinteraksi dengan tangan kami, kami mencadangkan Cabaran Pembinaan Semula agnostik Kelas Tangan untuk membina semula maklumat 3D tangan dan objek daripada klip video tanpa bergantung pada templat pra-imbasan. Tugasan ini lebih mencabar kerana manipulasi bimanual mempamerkan oklusi tangan-ke-objek yang teruk dan sentuhan tangan-ke-objek yang dinamik.

Cabaran penjanaan trajektori interaksi tangan-objek berdasarkan OakInk2

Fokus cabaran ini ialah menggunakan fungsi objek untuk mensintesis interaksi objek tangan-objek yang boleh dilaksanakan secara fizikal. Matlamatnya adalah untuk menggunakan trajektori demonstrasi dalam set data sedia ada untuk menjana trajektori interaksi objek tangan yang melengkapkan fungsi tertentu dalam persekitaran simulasi fizikal tertentu. Pesaing dikehendaki mensintesis trajektori yang boleh digunakan dalam persekitaran simulasi. Trajektori ini diperlukan untuk mengeksploitasi kefungsian objek untuk mencapai matlamat misi dari keadaan awal misi yang diberikan. Kami menggunakan dataset OakInk2 (Zhan et al. CVPR'24) sebagai sumber trajektori demo dalam cabaran ini. OakInk2 mengandungi demonstrasi interaksi objek tangan yang berpusat pada pelaksanaan kemampuan objek. Dalam cabaran ini, kami menyediakan demonstrasi pemindahan daripada tangan manusia (MANO) kepada avatar yang cekap (ShadowHand) untuk persekitaran IsaacGyn.

Berdasarkan cabaran penjejakan tangan egosentrik berbilang paparan MegoTrack

Cabaran ini bertujuan untuk menggalakkan pembangunan algoritma pengesanan tangan praktikal yang disesuaikan untuk sistem AR/VR menggunakan kamera egosentrik berbilang paparan. Peserta akan berpeluang untuk memanfaatkan keupayaan unik sistem AR/VR untuk meningkatkan keteguhan algoritma penjejakan tangan. Tahun ini, dua tugas berbeza dilancarkan:

1 Pembinaan semula tangan: Tentukan pembinaan semula tangan menggunakan video stereoskopik yang ditentukur.

2. Anggaran pose tangan: Gunakan bentuk tangan yang telah ditentukur untuk mengesan pose tangan dalam video stereoskopik yang ditentukur.

Untuk menggalakkan pembangunan kaedah yang boleh digeneralisasikan, kami akan menggunakan dua set data dengan konfigurasi berbeza: UmeTrack dan HOT3D, yang terakhir dilancarkan di CVPR. +

Atas ialah kandungan terperinci HANDS@ECCV24 Hand Symposium and Challenge, kami dengan tulus menjemput penyertaan dan penyertaan dalam pertandingan. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!