🤖 EgoForce: 3D-реконструкция рук по монокулярному видео
Разработан фреймворк EgoForce для реконструкции позы рук и геометрии предплечья по видео с камеры первого лица. Система использует унифицированный трансформер, работающий с любыми линзами (фишай, широкоугольные и др.), и повышает точность на датасете HOT3D на 28%.
🌍 Это решение критически важно для создания доступных AR/VR-устройств, так как позволяет отказаться от дорогих стереокамер или LiDAR в пользу простых монокулярных камер.
👤 Технология превращает обычное видео с носимых камер в точные 3D-данные, что открывает новые возможности для робототехники, метавселенных и систем дополненной реальности.
Источник 1: https://dfki-av.github.io/EgoForce/ Источник 2: https://github.com/dfki-av/EgoForce/tree/main