本发明公开了一种视频超分辨率重建的方法和装置，属于图像处理技术领域。所述方法包括：基于卷积神经网络和加速器框架生成多个预设分辨率对应的引擎文件，其中，所述引擎文件用于对视频进行超分辨率重建；基于GPU设备创建多个工作线程，设置每个所述工作线程的私有数据；根据待重建视频的分辨率，确定目标引擎文件，并在选取的多个目标工作线程上加载所述目标引擎文件；通过所述多个目标工作线程对所述待重建视频的视频数据进行图像推理，生成超分辨率重建后的视频数据。采用本发明，可以不同分辨率视频的超分辨率重建，并且可以提高超分辨率重建的效率，减少设备资源消耗，满足视频的实时性播放需求。