本实用新型提出一种基于嵌入式的红外双目手势控制系统，所述系统包括主控制器、红外双目模块、嵌入式数据分析处理器和数据传输器；红外双目模块包括双目相机和光源亮度控制器；双目相机捕获用户手势数据，处理器先根据该数据进行人手掌的检测，对于检测到的手掌按照比例进行扩充，再对扩充区域进行指尖的回归分析和指尖的轨迹分析，从而得到手势识别结果，并将识别结果发送给主控制器，主控制器将识别结果转换成手势控制指令发送给数据传输器，数据传输器将手势控制指令发送给外部设备使用。所述系统可以在嵌入式端运行，与高端的手势识别设备相比本实用新型所述系统对于处理终端要求低，成本低，与此同时又可以适用于复杂手势的识别。