本发明公开了一种基于图像识别的书面文档互动系统，包括书面文档、互动内容范围标记标识、选定互动指令操作对象标记标识、互动指令标记标识、互动指令参数标记标识、成像装置、处理器、存储器，本发明还公开了一种基于图像识别的书面文档互动方法，包括以下步骤：S1：预设交互操作标记操作及其标记标识识别处理库，S2：标记互动内容范围，S3：标记互动指令的操作对象，S4：给出互动指令和参数的标记标识，S5：识别互动的对象、指令和参数，S6：执行互动指令。本发明以较低的成本实现对书面文档的互动操作，无需长时间使用显示屏，可以增加书面文档的互动性，对视力影响较小，能够保护眼部健康。