本发明公开一种基于视觉的增强现实系统装置。装置包括虚拟场景发生器、透视式头盔显示器、用于实现用户观察视线跟踪的头部方位跟踪设备、用于实现虚拟场景与真实场景对准的定位设备和交互设备，在系统中，虚拟场景发生器采用OpenGL三维图形库负责虚拟场景的建模、管理、绘制；选用透视式头盔显示器作为将虚拟环境与真实环境融合的显示设备；头部方位跟踪设备采用计算机视觉的方法，通过对采集到的图象进行处理与识别跟踪用户视线变化，实现用户观察坐标系与虚拟场景坐标系的匹配。采用本发明的装置能够进行实时交互，具有极高的交互灵敏性，具有极佳的投影表现力。