本发明提出的是一种三维视景虚拟建造人机交互系统及方法。该三维视景人机交互系统集成时序电源、工作站集群、立体显示系统、位置跟踪系统、全身动捕系统、手柄控制器等人机交互设备，通过OpenGL截取显卡三维数据或制作虚拟现实内容呈现三维视景，操作者穿戴好全身动捕刚体套装、数据手套、立体眼镜和眼镜配套跟踪套件，绑定并校准后，实现三维视景人机交互，由真人实时驱动虚拟人完成虚拟装配动作，装配操作效率高、虚拟人动作真实不变形，可提高后续人机工程分析结果的准确性和可靠性，解决虚拟现实系统占用空间大、环境光要求高、成本高昂等不足，将虚拟现实带入寻常中小企业，实现虚拟现实人机交互，满足虚拟现实研究和应用需求。