球形卷积网络在学习 3D 形状的特征表示上有优势,尤其在旋转不变性方面表现突出。这个 Matlab 代码包就是基于这个理念,利用了跨域嵌入将 2D 图像映射到球形 CNN 潜在空间。最酷的是,这个方法无需额外的任务特定监督,就能完成像姿态估计和新颖视图合成等任务。代码的主要部分是model.py,这里面有一个典型的编码器-解码器架构,能让你从 2D 图像到球形嵌入,或反向操作。这个代码挺适合那些需要 3D 物体旋转的应用,比如增强现实(AR)或计算机视觉项目,操作上也蛮,能帮你快速上手。只是训练管道和数据集目前不公开,但模型本身还是挺值得一试的。