簡介
第八屆HANDS將在ECCV24（9月30日下午，米蘭）舉辦，包含研討會和挑戰賽。HANDS將為相關手部研究人員和從業者提供一個分享工作和討論潛在合作的平臺。過去7屆HANDS也取得了極大的成功。本文件屬於翻譯，資訊以官網為準。
HANDS@ECCV24 主頁：https://hands-workshop.org/
手部研討會和投稿：研討會專注於手部相關方向，將邀請手部相關領域的專家做前沿報告。特別的，我們誠邀相關長文投稿。
手部挑戰賽：挑戰賽基於最新的手部大資料集AssemblyHands、ARCTIC、OakInk2和UmeTrack，組織多個賽道，希望推動相關演算法的發展。
論文投稿
投稿網址：https://cmt3.research.microsoft.com/HANDS2024
投稿方向：所有手部相關方向，包括且不限於手部姿態估計、手部重構、手物互動、手勢分析、手勢生成、手語識別、機械手控制和機械手抓取等等
投稿規則：長文采取單輪雙盲審且不設反駁階段，採取ECCV24官方模板和限制，錄取後會出版在ECCV24會議論文集。我們同樣接受長摘要和海報投稿。長摘要和海報不會出版，但是方便交流和推廣相關工作。詳細內容見官網。
挑戰賽
我們基於最新的手部大資料集AssemblyHands、ARCTIC、OakInk2和UmeTrack，組織4個賽道的挑戰。挑戰獲勝者將會獲得相應的獎勵，並在研討會上推廣自己的方法。現已開放下載資料集，歡迎大家參加。參與競賽，請先官網註冊，參與挑戰期間請遵守相關規定。具體時間節點請關注相關賽道。
更多資訊見挑戰賽官網：https://hands-workshop.org/challenge2024.html
基於AssemblyHands的視角泛化手部姿態估計挑戰
該挑戰提供了 HANDS2023 中 AssemblyHands 挑戰賽的擴充套件版本。隨著多視角 AR/VR 頭顯（如 Apple Vision Pro、Meta Quest 等）日益受到關注，我們將 3D 手部姿態估計這一領域由單視角擴充套件到多視角設定。在該挑戰中，參賽者需要無監督地最佳化所提供的預訓練模型並使其適應多種雙視角設定，而雙視角的相機引數均為未知。具體來說，我們使用 AssemblyHands 資料集的多視角資料來構建該賽道。
基於ARCTIC的雙手手物互動三維重構挑戰
人類每天都會與各種物體互動，因此，對這些互動進行整體的 3D 捕捉對於人類行為建模至關重要。由於我們自然地用雙手進行互動，因此我們提出了雙手類別無關的重建挑戰賽，從影片片段中重建雙手和物體的3D資訊，而不依賴於預先掃描的模板。這項任務更具挑戰性，因為雙手操作表現出嚴重的手部與物體遮擋和動態手部與物體接觸。
基於OakInk2的手物互動軌跡生成挑戰
該挑戰賽的重點是利用物體功能性來合成物理上可行的手物互動。目標是利用現有資料集中的演示軌跡來生成在指定的物理模擬環境中完成指定功能的手部與物體互動軌跡。參賽者需要合成可以在模擬環境中展開的軌跡。這些軌跡需要利用物體的功能從給定的任務初始狀態實現任務目標。我們使用 OakInk2 資料集（Zhan et al. CVPR'24）作為本次挑戰賽中演示軌跡的來源。OakInk2 包含以實現物體可供性為中心的手部與物體互動演示。在本次挑戰賽中，我們為 IsaacGyn 環境提供從人手 (MANO) 到靈巧化身 (ShadowHand) 的轉移演示。
基於MegoTrack多視角自我中心手部跟蹤挑戰
該挑戰旨在利用多視角自我中心相機，推動為 AR/VR 系統量身定製的實用手部追蹤演算法的開發。參與者將有機會利用 AR/VR 系統的獨特功能來增強手部追蹤演算法的穩健性。今年，推出兩個不同任務：
1. 手部重構：使用校準的立體影片確定手部重構。
2. 手部姿態估計：利用預校準的手形，在校準的立體影片中跟蹤手部姿態。
為了鼓勵開發可推廣的方法，我們將採用兩個具有不同配置的資料集：UmeTrack 和 HOT3D，後者最近在 CVPR 上推出。
演講者
組織團隊
聯絡方式
hands2024@googlegroups.com