本发明公开了一种基于支持向量机的加密图像分类方法，它通过客户端收集待分类图像并加密成密文，上传至云端并利用云端服务器支持向量机分类模型，在不解密的情况下利用已训练好的支持向量机分类模型对密文运算，并将图像分类结果以密文的形式返回给客户端；最后，客户端执行解密模块得到图像分类结果。本发明绝大多数计算是在云服务器端进行，同时保护了用户图像的隐私性。且本发明的技术方案将整个矩阵编码成一个密文来进行运算显著地降低空间复杂度和减少密文运算次数，达到提高效率的目的。