本发明涉及一种基于自适应增强生成对抗网络的图像融合方法及系统。所述方法包括：构建稠密细节特征提取网络对源图像分别运用稠密卷积方式结合细节信息补偿机制进行特征提取；构建双通道自适应融合网络融合源特征图和细节信息特征图；融合特征图拼接后，构建1*1卷积网络实现跨通道的交互和信息融合；对融合后的特征图进行解码得到融合图像；在训练整体网络模型时，加入自适应结构相似性损失函数。该方法引入细节信息补偿机制增强融合图像细节并减少信息丢失，运用双通道自适应融合网络在通道维度上均衡融合图像中的红外信息和可见光信息，加入自适应结构相似性损失函数在空间维度上自适应增强融合图像与源图像的相似度，提高了融合图像质量。