本发明涉及雷达视频与光电视频显示技术领域，尤其涉及一种基于FPGA的多路雷达、光电视频综合显示方法及系统。所述方法包括获取全部需要显示的雷达视频数据、光电视频数据；对雷达视频数据、光电视频数据进行视频缓存前的预处理；控制预处理好的光电视频数据、雷达视频数据的读写过程；SSRAM和DDR SDRAM分别对雷达视频数据的像素点坐标系矩阵、光电视频数据像素点进行存储；完成雷达视频数据、光电视频数据按照视频窗口布局进行综合显示；所述系统包括数据预处理单元、视频缓存控制单元、异构存储器、显示控制单元和显示器；本发明实施例通过所述系统执行上述方法，采用一组SSRAM缓存多组雷达视频数据，一组DDR SDRAM缓存多路光电视频，提高了硬件显示缓存的利用率。