第八屆HANDS將在ECCV24(9月30日下午,米蘭)舉辦,包含研討會和挑戰賽。 HANDS將為相關手部研究人員和實務工作者提供一個分享工作和討論潛在合作的平台。過去7屆HANDS也取得了極大的成功。本文檔屬於翻譯,資訊以官網為準。
HANDS@ECCV24 首頁:https://www.php.cn/link/73d4d7b15bfefa13c4a035fa16bb99ed
手部研討會和手部提交做前沿報告。特別的,我們誠摯邀請相關長文投稿。
手部挑戰賽:挑戰賽基於最新的手部大數據集AssemblyHands、ARCTIC、OakInk2和UmeTrack,組織多個賽道,希望推動相關演算法的發展。
投稿網址:https://www.php.cn/link/b8c4464e7ee7dc326d7807a8549e449f重構、手物互動、手勢分析、手勢生成、手語辨識、機械手控制和機械手抓取等等
投稿規則:長文採取單輪雙盲審且不設反駁階段,採取ECCV24官方模板和限制,錄取後會出版在ECCV24會議論文集。我們同樣接受長摘要和海報投稿。長摘要和海報不會出版,但方便交流和推廣相關工作。詳細內容請見官網。挑戰賽
絲🜎蟜化該挑戰提供了HANDS2023 中AssemblyHands 挑戰賽的擴展版本。隨著多視角 AR/VR 頭戴裝置(如 Apple Vision Pro、Meta Quest 等)日益受到關注,我們將 3D 手部姿態估計這一領域由單一視角擴展到多視角設定。在該挑戰中,參賽者需要無監督地優化所提供的預訓練模型並使其適應多種雙視角設置,而雙視角的相機參數均為未知。具體來說,我們使用 AssemblyHands 資料集的多視角資料來建立該賽道。
基於ARCTIC的雙手手物交互三維重構挑戰
人類每天都會與各種物體互動,因此,對這些互動進行整體的 3D 捕捉對於人類行為建模至關重要。由於我們自然地用雙手進行互動,因此我們提出了雙手類別無關的重建挑戰賽,從視頻片段中重建雙手和物體的3D信息,而不依賴於預先掃描的模板。這項任務更具挑戰性,因為雙手操作表現出嚴重的手部與物體遮擋和動態手部與物體接觸。
基於OakInk2的手物交互軌跡生成挑戰
該挑戰賽的重點是利用物體功能性來合成物理上可行的手物交互。目標是利用現有資料集中的演示軌跡來產生在指定的實體模擬環境中完成指定功能的手部與物件互動軌跡。參賽者需要合成可以在模擬環境中展開的軌跡。這些軌跡需要利用物體的功能從給定的任務初始狀態實現任務目標。我們使用 OakInk2 資料集(Zhan et al. CVPR'24)作為本次挑戰賽中示範軌跡的來源。 OakInk2 包含以實現物件可供性為中心的手部與物件互動示範。在本次挑戰賽中,我們為 IsaacGyn 環境提供從人手 (MANO) 到靈巧化身 (ShadowHand) 的轉移演示。
基於MegoTrack多重視角自我中心手部追蹤挑戰
此挑戰旨在利用多視角自我中心相機,推動為 AR/VR 系統量身定制的實用手部追蹤演算法的開發。參與者將有機會利用 AR/VR 系統的獨特功能來增強手部追蹤演算法的穩健性。今年,推出兩個不同任務:
1. 手部重構:使用校準的立體視訊確定手部重構。
2. 手部姿態估計:利用預先校準的手形,在校準的立體視訊中追蹤手部姿態。
為了鼓勵開發可推廣的方法,我們將採用兩個具有不同配置的資料集:UmeTrack 和 HOT3D,後者最近在 CVPR 上推出。
以上是HANDS@ECCV24 手部研討會和挑戰賽,誠摯邀請投稿和參與競賽的詳細內容。更多資訊請關注PHP中文網其他相關文章!