本实用新型公开了一种实现菱形搜索算法的硬件结构，包括核心控制器分别与参考块存储器、PE阵列、SAD阵列、地址生成器、编码模块连接；地址生成器再与参考块存储器连接；参考块存储器和当前块存储器的信息流输出端同时接入PE阵列的信息流输入端，PE阵列的信息流输出端与SAD阵列的信息流输入端连接；SAD阵列的信息流输出端与编码模块的信息流输入端连接。该硬件结构充分利用了搜索算法中的重复数据，只使用了很低的输入带宽和较少的硬件损耗实现了运动估计中的菱形搜索算法。本实用新型可以使用于任何视频编码硬件设备中，可以用于多种匹配块尺寸大小情况下的菱形搜索。