本发明涉及计算机视觉技术领域,尤其是涉及一种基于半高斯剪枝的点投影式三维重建与分割方法及系统。方法包括基于获取的多视角图像分别得到SFM点云和跨视图标签的一致性标签掩码;将得到的SFM点云初始化为身份半高斯点云并使用可微分渲染器渲染优化;使用局部化半高斯点管理方法对初始稀疏点云致密化,并识别局部错误区域进行重置和修复;利用得到的一致性标签掩码使用交叉熵损失监督高斯身份特征学习,使用无监督的3D正则化损失强制空间邻近的高斯之间保持身份一致性;本发明方法采用身份编码半高斯核的方法,消除了单不透明度公式固有的表示模糊性,并对身份编码精度产生积极影响。 |