本发明提供了一种遥感图像配准方法，本发明提出一种特征提取架构，首先利用预训练网络提取图像特征，然后加入通道注意力机制，寻找重要通道特征，减少无关点的干扰。本发明提取网络中不同尺度的特征，设计多尺度的双向匹配关系。补充不同尺度的特征信息对特征关系进行建模，提高模型的鲁棒能力，增强匹配的准确性。本发明改进损失函数，利用回归得到的四个参数设计新的损失函数迭代优化网络模型，提高配准的准确性。