本发明公开了一种基于椭圆交并比的遥感图像目标检测方法及装置，属于计算机视觉技术领域，方法包括：获取原始图像，将原始图像中目标的标注信息转换为椭圆标注后输入至目标检测器，目标检测器包括依次连接的骨干网络、RRPN网络和RoIHead网络，RRPN网络和所述RoIHead网络的回归损失函数均采用椭圆交并比损失函数；利用骨干网络提取输入图像的多尺度特征图；将多尺度特征图作为所述RRPN网络的输入，得到目标的旋转候选框；将多尺度特征图和旋转候选框作为RoIHead网络的输入，得到原始图像的检测结果。本发明将原始图像中目标的标注信息转换为椭圆标注，并提出椭圆交并比的计算方式计算预测框与目标框之间的重合度，提高了遥感图像目标检测的效果。