🤖 NVIDIA открыла модели 3D-зрения для роботов
15 сентября NVIDIA выложила на Hugging Face две открытые модели 3D-перцепции: FoundationStereo (63 млн параметров) для стерео-глубины и FoundationPose для 6-DoF-позы объектов. Обе — под лицензией с правом коммерческого применения и отмечены на CVPR.
🌍 Исследовательские модели 3D-перцепции превратились в готовые веса ONNX и TensorRT с лицензией для коммерции. Робототехническим командам не нужны датасеты и дообучение: zero-shot-инференс глубины и позы работает от Jetson Orin до H100.
👤 Со стереокамерой и NVIDIA-железом веса можно бесплатно скачать с Hugging Face: FoundationStereo нужна пара кадров, FoundationPose — CAD-модель в OBJ и RGBD-кадр. Прозрачные и блестящие предметы, пересвет и плохой свет — слабые зоны.
Источник 1: https://huggingface.co/nvidia/c-foundationstereo-s Источник 2: https://huggingface.co/nvidia/foundationpose