本发明公开了一种召回方案评估方法、装置及计算机设备，该方法包括：调用目标接口以执行目标召回方案获得当前搜索词的目标召回结果，目标召回结果包括召回类型、召回强相关商品表和召回弱相关商品表；基于预先建立的标准数据集与目标召回结果计算目标召回方案的查全率与查准率，标准数据集包括至少两个预设搜索词对应的强相关商品数据列表、弱相关商品数据列表和不相关商品数据列表，至少两个预设搜索词包括当前搜索词；基于查全率与查准率以及预设评估规则获得目标召回方案的性能分值；预先设置标准数据集，通过计算执行召回方案的搜索词召回结果与标准数据集有效评估召回方案的准确性，性能分值反应不同召回方案的差异便于选择更优的方案。