本发明涉及一种基于对抗式学习与多模态学习的点云语义分割方法与系统，该方法包括如下步骤：在源领域与目标领域上，建立3D点云数据与2D前视图像之间的对应关系，将3D点云数据上的标签传递至2D前视图像的采样点上；根据包含类别标签的源领域数据以及无类别标签标注的目标领域数据，对判别器、二维图像子网络以及三维点云子网络进行训练，至收敛后以建立得到点云语义分割网络模型；将目标领域中的3D点云数据以及对应的2D前视图像输入至点云语义分割网络模型中，经语义分割网络模型计算得出点云语义分割结果。本发明提出的点云语义分割方法，可提高模型从源领域到目标领域的泛化性，并减小了标注的工作量。