本发明的实施例提供一种船舶避碰算法的评价方法、装置及设备，所述方法包括：获取避碰测试过程中第一船的测试数据；所述第一船通过避碰算法与具有预设行程轨迹的所述第二船进行避碰测试；根据所述测试数据与预设避碰算法评价衡准中的至少一项避碰算法评价衡准，对所述避碰算法的输出进行评价，得到至少一项避碰算法评价衡准对应的中间评价结果；根据所述至少一项避碰算法评价衡准对应的中间评价结果，得到所述第一船与所述第二船在避碰测试过程结束时的避碰算法的目标评价结果。本发明的实施例保证了船舶避碰算法的评价的客观性，可适应于各种船型和场景，船舶避碰算法的评价保证了对安全航速、最小会遇距离以及行动高效等关键指标的评价。