本发明公开了具有深度模板匹配的可扩展语义图像检索。本公开提出的方法提供语义数据匹配，这对于从大型未标记数据集中选择数据以训练神经网络可能是有用的。对于对象检测用例，即使当感兴趣的对象表示图像的相对小的部分或者图像中有许多其他对象时，这样的处理也可以识别未标记集内的图像。可以对查询图像进行处理，以仅从该图像中的一个或更多个感兴趣区域提取图像特征或特征图，如可能对应于感兴趣的对象。将这些特征与未标记数据集中的图像进行比较，计算一个或更多个感兴趣区域的特征与未标记集中的单个图像之间的相似度得分。可以选择一个或更多个得分最高的图像作为训练图像，显示语义上与查询图像中的对象相似的对象。