arXiv Computer Vision· Furkan Mert Algan, Zhifan Ni, Eckehard Steinbach·· 13 小时前AI 评分31
RadarDINO:将视觉基础模型蒸馏进毫米波雷达实现人体网格重建
RadarDINO: Distilling a Visual Foundation Model into mmWave Radar for Human Mesh Reconstruction
AI 导读
RadarDINO 把 DINOv3 的视觉语义蒸馏到 3D 雷达表征中,用于毫米波雷达人体网格重建。该方法通过标定的 RGB-雷达几何将 DINOv3 描述子迁移到雷达体素,提供体素级和身体部位级监督,并加入顶点损失与关节损失直接约束重建几何。在 M4Human 数据集上,该方法在全部三个评测划分上均优于 SOTA 基线。
推荐理由模型分析
RadarDINO 针对毫米波雷达人体网格重建中稀疏点云信息丢失、原始张量方法语义粗糙的问题,用标定的 RGB-雷达几何把 DINOv3 视觉描述子迁移到雷达体素,做体素级和身体部位级监督,并加入顶点与关节损失直接约束几何。在 M4Human 数据集三个划分上均优于 SOTA 基线,为隐私场景下的雷达感知提供了可比较的蒸馏基线;但证据限于该数据集,尚未涉及跨场景泛化或实机部署。
来源:arXiv Computer Vision · arxiv.org