本发明是关于一种基于二值语义嵌入的图像检索和识别方法和装置，方法包括：确定目标函数，利用训练集中样本图像的标签信息、成对相似度矩阵和原始视觉信息，学习从原始图像空间到二值语义空间的映射，得到深度神经网络检索模型和样本图像对应的二值码库；利用深度神经网络检索模型将待检索图像映射到二值语义空间中，以得到待检索图像对应的第一二值码；计算待检索图像对应的第一二值码与二值码库中的每个第二二值码之间的海明距离，并进行升序排列；根据海明距离的排列结果确定近似最近邻检索结果；采用多数投票的方式，依据近似最近邻检索结果中的图像类别识别待检索图像的类别。通过该技术方案，可以充分嵌入图形知识，提高节点分类的准确性。