本发明公开了一种基于立体视觉和手势控制的高空作业遥操作方法及系统，PC端接收双目立体相机采集的高空作业区域实景信息，并实时显示到可穿戴式立体显示器中；根据可穿戴式立体显示器显示的立体实景工况，进行手部操作并实时追踪手和手指的运动信息，将追踪的手和手指运动信息发送至PC端，经处理后转换成仿生机械手的运动指令；仿生机械手接收处理转换后的运动指令，进行相应随动以完成高空作业的遥操作。本发明通过立体视觉和手势控制相结合的遥操作方法和系统，可以保障高空作业人员的人身安全，提高遥操作时操作人员对现场实景的三维感知，同时增强遥操作的交互自然性和沉浸感。